AI交流(进群备注:LLM Scraper)

LLM Scraper 是一个开源的 TypeScript 库,利用大型语言模型(LLMs)从任何网页中提取结构化数据。它支持多种 LLM 提供商和输入格式,包括 html、markdown、text 和 image。此外,它还支持流式传输对象,并新增了代码生成功能,以提高数据处理的效率。
LLM Scraper的特点:
- 1. 支持多种 LLM 提供商,如 Ollama、OpenAI、Vercle AI SDK 等
- 2. 允许输入 html、markdown、text、image 等多种格式化模式提取数据
- 3. 支持流式传输对象,便于处理大规模数据
- 4. 新增代码生成功能,以自动化数据处理流程
LLM Scraper的功能:
- 1. 从网页中提取结构化数据
- 2. 处理多种输入格式的数据,如 html、markdown、text、image
- 3. 使用流式传输对象处理大规模数据
- 4. 生成代码以自动化数据处理流程
相关导航
暂无评论...