所有AI工具AI开发框架AI开源项目

LLM Scraper开源项目 – 从网页提取结构化数据的开源库

LLM Scraper 是一个开源的 TypeScript 库,利用大型语言模型(LLMs)从任何网页中提取结构化数据。它支持多种 LLM 提供商和输入格式,包括 html、markdown、text 和 image。此外,...

标签:

AI交流(进群备注:LLM Scraper)

LLM Scraper 是一个开源的 TypeScript 库,利用大型语言模型(LLMs)从任何网页中提取结构化数据。它支持多种 LLM 提供商和输入格式,包括 html、markdown、text 和 image。此外,它还支持流式传输对象,并新增了代码生成功能,以提高数据处理的效率。

LLM Scraper的特点:

  • 1. 支持多种 LLM 提供商,如 Ollama、OpenAI、Vercle AI SDK 等
  • 2. 允许输入 html、markdown、text、image 等多种格式化模式提取数据
  • 3. 支持流式传输对象,便于处理大规模数据
  • 4. 新增代码生成功能,以自动化数据处理流程

LLM Scraper的功能:

  • 1. 从网页中提取结构化数据
  • 2. 处理多种输入格式的数据,如 html、markdown、text、image
  • 3. 使用流式传输对象处理大规模数据
  • 4. 生成代码以自动化数据处理流程

相关导航

暂无评论

暂无评论...