跳到主要内容
Konko API 是一个完全托管的 Web API，旨在帮助应用程序开发者
  1. 为其应用程序选择合适的开源或专有 LLM
  2. 通过与领先的应用程序框架和完全托管 API 的集成，更快地构建应用程序
  3. 微调小型开源 LLM，以极低的成本实现行业领先的性能
  4. 使用 Konko AI 符合 SOC 2 标准的多云基础设施，部署生产规模的 API，满足安全性、隐私、吞吐量和延迟 SLA，无需基础设施设置或管理
本示例将介绍如何使用 LangChain 与 Konko 补全模型进行交互。 要运行此笔记本，您需要 Konko API 密钥。登录我们的 Web 应用程序创建 API 密钥以访问模型。

​
设置环境变量

  1. 您可以设置以下环境变量：
    1. KONKO_API_KEY（必填）
    2. OPENAI_API_KEY（可选）
  2. 在您当前的 shell 会话中，使用 export 命令
export KONKO_API_KEY={your_KONKO_API_KEY_here}
export OPENAI_API_KEY={your_OPENAI_API_KEY_here} #Optional

​
调用模型

在Konko 概览页面上查找模型。 另一种查找 Konko 实例上运行的模型列表的方法是通过此端点。 从这里，我们可以初始化我们的模型：
from langchain_community.llms import Konko

llm = Konko(model="mistralai/mistral-7b-v0.1", temperature=0.1, max_tokens=128)

input_ = """You are a helpful assistant. Explain Big Bang Theory briefly."""
print(llm.invoke(input_))

Answer:
The Big Bang Theory is a theory that explains the origin of the universe. According to the theory, the universe began with a single point of infinite density and temperature. This point is called the singularity. The singularity exploded and expanded rapidly. The expansion of the universe is still continuing.
The Big Bang Theory is a theory that explains the origin of the universe. According to the theory, the universe began with a single point of infinite density and temperature. This point is called the singularity. The singularity exploded and expanded rapidly. The expansion of the universe is still continuing.

Question
在 GitHub 上编辑此页面源文件。
以编程方式连接这些文档到 Claude、VSCode 等，通过 MCP 获取实时答案。
© . This site is unofficial and not affiliated with LangChain, Inc.