update

docs/tools-benchmark.md

@@ -1,6 +1,6 @@
 # 大模型性能基准测试指南
 
-Auto-coder 提供了一个强大的 benchmark 工具，可以帮助开发者评估和比较不同大语言模型（LLM）的性能。本文将详细介绍如何使用这个工具进行性能测试。
+auto-coder.rag 提供了一个简单的 benchmark 工具，可以帮助开发者评估和比较不同大语言模型（LLM）的性能。本文将详细介绍如何使用这个工具进行性能测试。
 
 ## 1. 基本用法
 
@@ -20,14 +20,14 @@ auto-coder.rag benchmark --model MODEL_NAME [--parallel PARALLEL] [--rounds ROUN
 
 ### 1.2 使用示例
 
-1. 测试 ByzerLLM 的 deepseek_chat 模型：
+1. 测试 ByzerLLM 部署的模型服务：
 ```bash
 auto-coder.rag benchmark --model deepseek_chat --parallel 20 --rounds 3
 ```
 
-2. 测试 OpenAI 的 gpt-4 模型：
+2. 测试 OpenAI SDK兼容的模型服务：
 ```bash
-auto-coder.rag benchmark --model gpt-4 --type openai --api_key YOUR_API_KEY
+auto-coder.rag benchmark --model gpt-4 --type openai --base_url xxxx --api_key YOUR_API_KEY
 ```
 
 ## 2. 测试指标说明

docs/tools-chunk-recall.md

@@ -4,7 +4,7 @@ Auto-coder 提供了两个用于评估和验证文档相关性的命令行工具
 
 ## recall 工具
 
-`recall` 工具用于验证文档召回模型的效果。它可以帮助我们了解模型在给定查询时是否能够正确检索到相关文档。
+recall 工具用于验证指定的模型是否可以支持 auto-coder.rag  recall 功能。
 
 ### 基本用法
 
@@ -43,7 +43,7 @@ auto-coder.rag tools recall \
 
 ## chunk 工具
 
-`chunk` 工具用于验证文本分块模型的性能。它可以帮助我们评估模型在文档分段方面的表现。
+chunk 工具可以用于指定的模型是否能够支持 auto-coder.rag 动态文本抽取的能力。
 
 ### 基本用法
 

setup.py

@@ -41,7 +41,8 @@
     },
     package_dir={"": "src"},
     packages=find_packages("src"),    
-    package_data={        
+    package_data={
+        "autocoder": ["data/**/*"],
     },
     install_requires=install_requires,
     classifiers=[        

src/auto_coder.egg-info/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: auto-coder
-Version: 0.1.205
+Version: 0.1.206
 Summary: AutoCoder: AutoCoder
 Author: allwefantasy
 Classifier: Topic :: Scientific/Engineering :: Artificial Intelligence

src/auto_coder.egg-info/SOURCES.txt

@@ -12,12 +12,14 @@ src/autocoder/auto_coder.py
 src/autocoder/auto_coder_lang.py
 src/autocoder/auto_coder_rag.py
 src/autocoder/auto_coder_server.py
+src/autocoder/benchmark.py
 src/autocoder/chat_auto_coder.py
 src/autocoder/chat_auto_coder_lang.py
 src/autocoder/command_args.py
 src/autocoder/lang.py
 src/autocoder/version.py
 src/autocoder/agent/__init__.py
+src/autocoder/agent/auto_filegroup.py
 src/autocoder/agent/auto_tool.py
 src/autocoder/agent/coder.py
 src/autocoder/agent/designer.py
@@ -29,6 +31,7 @@ src/autocoder/common/ShellClient.py
 src/autocoder/common/__init__.py
 src/autocoder/common/anything2images.py
 src/autocoder/common/audio.py
+src/autocoder/common/chunk_validation.py
 src/autocoder/common/cleaner.py
 src/autocoder/common/code_auto_execute.py
 src/autocoder/common/code_auto_generate.py
@@ -47,12 +50,14 @@ src/autocoder/common/git_utils.py
 src/autocoder/common/image_to_page.py
 src/autocoder/common/interpreter.py
 src/autocoder/common/llm_rerank.py
+src/autocoder/common/recall_validation.py
 src/autocoder/common/screenshots.py
 src/autocoder/common/search.py
 src/autocoder/common/search_replace.py
 src/autocoder/common/sys_prompt.py
 src/autocoder/common/text.py
 src/autocoder/common/types.py
+src/autocoder/data/tokenizer.json
 src/autocoder/db/__init__.py
 src/autocoder/db/store.py
 src/autocoder/dispacher/__init__.py
@@ -107,6 +112,7 @@ src/autocoder/utils/conversation_store.py
 src/autocoder/utils/llm_client_interceptors.py
 src/autocoder/utils/log_capture.py
 src/autocoder/utils/multi_turn.py
+src/autocoder/utils/operate_config_api.py
 src/autocoder/utils/print_table.py
 src/autocoder/utils/queue_communicate.py
 src/autocoder/utils/request_event_queue.py