Skip to content

OpenAI 兼容 LLM Handler

使用 OpenAI 兼容 API 进行语言模型推理。如果你已有一个可调用的 LLM API Key,可以用这种方式启动来体验对话数字人。

配置参数

yaml
LLMOpenAICompatible: 
  model_name: "qwen-plus"
  system_prompt: "你是个AI对话数字人,你要用简短的对话来回答我的问题,并在合理的地方插入标点符号"
  api_url: 'https://dashscope.aliyuncs.com/compatible-mode/v1'
  api_key: 'yourapikey' # default=os.getenv("DASHSCOPE_API_KEY")
参数默认值说明
LLMOpenAICompatible.model_nameqwen-plus模型名称
LLMOpenAICompatible.system_prompt默认系统 prompt
LLMOpenAICompatible.api_url模型 API URL
LLMOpenAICompatible.api_key模型 API Key

TIP

系统默认会获取项目当前目录下的 .env 文件用来获取环境变量。