bdd46c5dd1
* Update version to 3.74 * Add support for Yi Model API (#1635) * 更新以支持零一万物模型 * 删除newbing * 修改config --------- Co-authored-by: binary-husky <qingxu.fu@outlook.com> * Refactor function signatures in bridge files * fix qwen api change * rename and ref functions * rename and move some cookie functions * 增加haiku模型，新增endpoint配置说明 (#1626) * haiku added * 新增haiku，新增endpoint配置说明 * Haiku added * 将说明同步至最新Endpoint --------- Co-authored-by: binary-husky <qingxu.fu@outlook.com> * private_upload目录下进行文件鉴权 (#1596) * private_upload目录下进行文件鉴权 * minor fastapi adjustment * Add logging functionality to enable saving conversation records * waiting to fix username retrieve * support 2rd web path * allow accessing default user dir --------- Co-authored-by: binary-husky <qingxu.fu@outlook.com> * remove yaml deps * fix favicon * fix abs path auth problem * forget to write a return * add `dashscope` to deps * fix GHSA-v9q9-xj86-953p * 用户名重叠越权访问patch (#1681) * add cohere model api access * cohere + can_multi_thread * fix block user access(fail) * fix fastapi bug * change cohere api endpoint * explain version --------- Co-authored-by: Menghuan1918 <menghuan2003@outlook.com> Co-authored-by: Skyzayre <120616113+Skyzayre@users.noreply.github.com> Co-authored-by: XIao <46100050+Kilig947@users.noreply.github.com>
P.S. 如果您按照以下步骤成功接入了新的大模型，欢迎发Pull Requests（如果您在自己接入新模型的过程中遇到困难，欢迎加README底部QQ群联系群主）
如何接入其他本地大语言模型
-
复制
request_llms/bridge_llama2.py，重命名为你喜欢的名字 -
修改
load_model_and_tokenizer方法，加载你的模型和分词器（去该模型官网找demo，复制粘贴即可） -
修改
llm_stream_generator方法，定义推理模型（去该模型官网找demo，复制粘贴即可） -
命令行测试
- 修改
tests/test_llms.py（聪慧如您，只需要看一眼该文件就明白怎么修改了） - 运行
python tests/test_llms.py
- 修改
-
测试通过后，在
request_llms/bridge_all.py中做最后的修改，把你的模型完全接入到框架中（聪慧如您，只需要看一眼该文件就明白怎么修改了） -
修改
LLM_MODEL配置，然后运行python main.py，测试最后的效果
如何接入其他在线大语言模型
-
复制
request_llms/bridge_zhipu.py，重命名为你喜欢的名字 -
修改
predict_no_ui_long_connection -
修改
predict -
命令行测试
- 修改
tests/test_llms.py（聪慧如您，只需要看一眼该文件就明白怎么修改了） - 运行
python tests/test_llms.py
- 修改
-
测试通过后，在
request_llms/bridge_all.py中做最后的修改，把你的模型完全接入到框架中（聪慧如您，只需要看一眼该文件就明白怎么修改了） -
修改
LLM_MODEL配置，然后运行python main.py，测试最后的效果