Apify 是一个用于网络抓取和数据提取的云平台,它提供了一个包含一千多个现成应用程序(称为 Actors)的生态系统,用于各种抓取、爬取和提取用例。此集成允许您在
Apify 平台上运行 Actors,并将其结果加载到 LangChain 中,以便将来自网络的文档和数据(例如,从包含文档、博客或知识库的网站生成答案)馈送到您的向量索引。
安装和设置
- 使用以下命令安装适用于 Python 的 LangChain Apify 包:
- 获取您的 Apify API 令牌,并将其设置为环境变量 (
APIFY_API_TOKEN) 或在构造函数中作为apify_api_token传递。
工具
您可以使用ApifyActorsTool 将 Apify Actors 与代理一起使用。
包装器
您可以使用ApifyWrapper 在 Apify 平台上运行 Actors。
文档加载器
您还可以使用我们的ApifyDatasetLoader 从 Apify 数据集中获取数据。
以编程方式连接这些文档到 Claude、VSCode 等,通过 MCP 获取实时答案。