Scrapeless 提供灵活、功能丰富的数据采集服务,支持广泛的参数自定义和多格式导出。
安装和设置
pip install langchain-scrapeless
uv add langchain-scrapeless
您需要设置您的 Scrapeless API 密钥:
os.environ["SCRAPELESS_API_KEY"] = "your-api-key"
工具
Scrapeless 集成提供多种工具:
- - ScrapelessDeepSerpGoogleSearchTool - 支持全面提取各类 Google SERP 数据。
- - ScrapelessDeepSerpGoogleTrendsTool - 获取 Google 关键词趋势数据,包括随时间变化的热门程度、区域关注度及相关搜索词。
- - ScrapelessUniversalScrapingTool - 访问并提取通常会阻止爬虫的 JS 渲染网站数据。
- - ScrapelessCrawlerCrawlTool - 爬取网站及其链接页面以提取全面的数据。
- - ScrapelessCrawlerScrapeTool - 从单个网页中提取信息。