在提示中包含多模态内容

某些应用程序围绕多模态内容构建，例如可以回答有关 PDF 或图像问题的聊天机器人。在这种情况下，您需要将多模态内容包含在提示中，并测试模型回答有关内容问题的能力。 LangSmith Playground 支持两种将多模态内容纳入提示的方法：

内联内容：将静态文件（图像、PDF、音频）直接嵌入到提示中。当您希望在所有使用提示时始终包含相同的多模态内容时，这非常理想。例如，您可以包含一个参考图像，帮助模型给出更准确的响应。
模板变量：为附件创建动态占位符，每次都可以用不同的内容填充。这种方法提供了更大的灵活性，允许您
- 测试模型如何处理不同的输入
- 创建可与不同内容一起重复使用的提示

并非所有模型都支持多模态内容。在使用 playground 中的多模态功能之前，请确保您选择的模型支持您要使用的文件类型。

内联内容

单击要添加多模态内容的消息中的文件图标。在 Upload content 选项卡下，您可以上传文件并将其内联包含在提示中。

点击要添加多模态内容的消息中的文件图标。在 Template variables 选项卡下，您可以为特定附件类型创建模板变量。目前，仅支持图像、PDF 和音频文件（.wav、.mp3）。

添加模板变量后，您可以使用屏幕右侧的面板为其提供内容。只需单击 + 按钮即可上传或选择将用于填充模板变量的内容。

手动测试提示后，您可以运行评估，查看提示在黄金示例数据集上的表现。

以编程方式连接这些文档到 Claude、VSCode 等，通过 MCP 获取实时答案。