diff --git a/src/.vuepress/public/assets/image/QChatGPT-0516.png b/src/.vuepress/public/assets/image/QChatGPT-0516.png new file mode 100644 index 000000000..644136ba4 Binary files /dev/null and b/src/.vuepress/public/assets/image/QChatGPT-0516.png differ diff --git a/src/posts/config/provider.md b/src/posts/config/provider.md index 66ab58e83..68260d8cf 100644 --- a/src/posts/config/provider.md +++ b/src/posts/config/provider.md @@ -27,6 +27,14 @@ category: `enable-chat`:是否开启AI聊天功能 +## 启用 AI 视觉功能 enable-vision + +```json +"enable-vision": true, +``` + +`enable-vision`:是否开启AI视觉功能。需要使用的模型同时支持视觉功能,详情见元数据板块。 + ## 模型接口密钥 keys ```json diff --git a/src/posts/metadata/llm-models.md b/src/posts/metadata/llm-models.md index 300c403f8..4b62efaa2 100644 --- a/src/posts/metadata/llm-models.md +++ b/src/posts/metadata/llm-models.md @@ -23,11 +23,17 @@ category: "name": "default", "requester": "openai-chat-completions", "token_mgr": "openai", - "tool_call_supported": false + "tool_call_supported": false, + "vision_supported": false }, { "name": "gpt-3.5-turbo", "tool_call_supported": true + }, + { + "name": "gpt-4o", + "tool_call_supported": true, + "vision_supported": true } ] } @@ -40,18 +46,19 @@ category: - `requester`: 请求器名称,指定使用哪个请求器请求该模型的响应,不同的请求器对应不同的 API,当前支持的模型,可以在 `data/config/provider.json` 中的 `requester` 列表中找到。 - `token_mgr`: Key 管理器,此模型使用的 key 组,对应 `data/config/provider.json` 中的 `keys` 列表。 - `tool_call_supported`: 是否支持工具调用,标记此模型是否支持使用`内容函数`。 +- `vision_supported`: 是否支持图像输入,标记此模型是否支持使用`图像输入`。 `default` 模型是必须的,这是模型的默认配置,其他模型可以不设置所有的字段,只需设置 `name` 字段即可,其他字段会继承 `default` 模型的配置。 ## 自动更新机制 -每次启动时,程序会自动从中央服务器获取最新的模型列表,相同的模型名称会被下载的新配置覆盖。 +每次启动时,程序会自动从中央服务器获取最新的模型列表,已有的的模型名称会被下载的新配置覆盖。 ## 自定义模型 根据上述格式添加即可。 -- 如果需要使用目前不支持的接口(请求器),需要自己扩展请求器,请参考插件开发文档。 +- 如果需要使用目前不支持的接口(请求器),需要自己扩展请求器,请参考插件开发文档 -> 组件扩展。 - key 组可以自己在 `data/config/provider.json` 中的 `keys` 列表中添加。 - 修改模型配置一般是没有必要的,每次启动时下载的模型列表会覆盖本地的相同模型名称的配置。