gpt-automated-web-scraper
AI Web Scraper是一款由AI驱动的网页抓取工具,支持用户根据需求从HTML源中提取数据。工具的主要功能包括生成和执行抓取代码,并支持URL或本地文件路径作为数据源,为用户提供灵活的选择。该项目需要Python和OpenAI GPT-4 API密钥。安装步骤包括克隆项目仓库、安装依赖包并设置API密钥。使用时可通过命令行参数指定抓取源、源类型和目标字符串。此项目采用MIT许可证,用户可自由修改和使用。