Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

【开源自荐】Web Crawler Script Generator:多模态LLM智能生成跨平台爬虫脚本工具 #160

Open
MaskerPRC opened this issue Dec 8, 2024 · 0 comments

Comments

@MaskerPRC
Copy link

Web Crawler Script Generator

项目地址 | Project Links 🌐

项目介绍 | Introduction 📖✨

推荐一款全新的开源工具 —— Web Crawler Script Generator,专为开发者和数据分析师打造!🎉 该工具基于 Electron,结合 Puppeteer 和 OpenAI,多语言支持,帮助用户轻松生成跨平台的爬虫脚本。只需输入目标网站 URL,工具将自动分析网站结构,提取关键信息,并生成可用于 Puppeteer 的 Node.js 爬虫代码。🚀

已支持的功能 | Features ✅

  • 简便易用:用户友好的界面,输入 URL 即可生成爬虫脚本。🖥️
  • 自动化分析:使用 Puppeteer 自动加载网站,截图并提取文本内容。📄📸
  • 智能处理:集成 OpenAI 多模态接口,智能提取标题、摘要、时间等关键信息。🧠
  • 精确选择器:利用 @medv/finder 生成精准的 CSS 选择器,确保爬虫脚本的稳定性。🎯
  • 多语言支持:支持中英文双语界面,满足不同用户的需求。🌐
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

1 participant