LLM
ScrapeGraphAI
ScrapeGraphAI 是一款基于大型语言模型(LLM)的智能网络爬虫工具包,能够高效提取结构化数据。其核心功能包括 SmartScraper、SearchScraper 和 Markdownify,支持自然语言驱动的爬取、多页面搜索、自适应爬取、多模型和多平台兼容,可生成代码并存储为 CSV 或 JSON 格式。适用于市场分析、学术研究、产品信息收集等场景。
smolagents
SmolAgents 是 Hugging Face 开发的轻量级智能代理框架,支持多种大语言模型集成与安全代码执行。具备模块化设计、直观 API 及丰富文档,适用于数据检索、自动化编程、智能客服等多种场景,降低 AI 开发门槛,提升开发效率。
