使用场景
用于更新AI工具目录，收集和整理AI工具信息。
作为学习项目，帮助理解网页爬虫的工作原理和实现方式。
集成到更大的系统中，作为数据收集和处理的组件。
产品特色
获取输入网站的标题、描述和介绍
为输入的网站制作截图
支持使用LLM（如llama3/chatgpt）处理网站介绍并生成SEO友好的Markdown描述
快速配置
快速部署
支持自定义API密钥进行REST API访问
使用教程
1. 注册Cloudflare账号并选择R2服务，创建存储图片的存储桶，并设置为公开访问。
2. 创建R2 API令牌，并保存相关参数，如ENDPOINT_URL, BUCKET_NAME等。
3. 克隆项目到本地，并根据需要修改.env文件中的环境变量。
4. 安装Python依赖，并运行项目，本地将暴露RestAPI。
5. 使用curl通过POST请求验证API，发送包含url和其他参数的JSON格式请求。
6. 接收API响应，获取网站描述、详情、截图等信息。
