9218 Commits

Author SHA1 Message Date
limin
8a9db64ab1 修改基座模型定时启动问题 2025-02-24 17:16:12 +08:00
limin
8bc34b0163 修改yaml配置 2025-02-24 11:03:36 +08:00
7b1c35c8ee Merge remote-tracking branch 'origin/master' 2025-02-21 17:47:06 +08:00
d4deff119a refactor(yudao-server): 更新 RAG 服务和训练集相关 API 的端口
- 将 RAG 服务相关 API 的端口从 8000 修改为 8123
- 更新了健康检查、向量化、文档获取和查询等 API 的 URL
2025-02-21 17:46:51 +08:00
5a5342873b Merge remote-tracking branch 'origin/master' 2025-02-21 17:35:25 +08:00
7e8f5ca3df refactor(yudao-server): 更新 RAG 相关 API 的主机地址
- 将 rag_embed 和 embed 的主机地址从 36.103.199.248 改为127.0.0.1
- 此修改确保了所有 RAG 相关的 API 调用都指向本地服务
2025-02-21 17:35:14 +08:00
708a79c8dd refactor(yudao-server): 更新 API 服务地址 2025-02-21 17:34:50 +08:00
b046efa65b refactor(module-llm):重构知识库文档上传流程
- 优化了 createKnowledgeBase 方法的逻辑,增加了日志记录和错误处理
- 重构了 embedUploadFile 方法,使用 HttpClient 替代 Unirest
- 改进了 knowledgeEmbed 方法,使用 OkHttpClient 替代 Unirest
- 优化了 getFileByte 方法,增加了日志记录和错误处理
- 移除了未使用的代码和冗余的注释
2025-02-21 17:28:41 +08:00
758b00fefb refactor(module-llm):优化 HTTP 请求和响应的日志记录
- 移除重复的日志记录代码
- 添加请求耗时的记录
- 优化日志输出格式
- 封装日志打印逻辑到单独的方法中
2025-02-21 17:05:39 +08:00
limin
241cefdac9 修改华为服务器配置 2025-02-21 15:41:33 +08:00
6247b788e6 refactor(yudao-module-llm): 暂时移除知识库创建文件的异步处理
- 注释掉 AsyncKnowledgeBase 类中的 createKnowledgeBase 方法的 @Async 注解
- 此修改可能是为了调试或测试目的,暂时将该方法改为同步执行
2025-02-21 15:34:03 +08:00
ire
d1d2bbd90b bug 2025-02-21 14:54:41 +08:00
limin
0accab34ad 修改华为服务器配置 2025-02-21 14:46:12 +08:00
adebc2952a env(ymx): 更新 API地址并调整日志级别- 将 RAG 服务、大模型管理、微调任务、文件上传和模型部署等 API地址从远程服务器改为本地地址
- 在 logback-spring.xml 中将 ymx 环境添加到使用 INFO 日志级别的配置中
2025-02-21 14:20:21 +08:00
8a0733ec70 refactor(yudao-server): 更新 API 接口地址
-将本地地址 (127.0.0.1) 替换为远程地址 (36.103.199.248)
- 更新了多个端口的 API 接口地址,包括 8123、9000、5123、30000等
- 此修改统一了 API 接口的服务器地址,确保所有请求都指向同一台远程服务器
2025-02-21 14:12:11 +08:00
4e9c83a19a refactor(yudao-server): 更新 RAG 服务接口地址调试使用
- 将本地地址 127.0.0.1 更改为远程地址 36.103.199.248
- 修改涉及 rag_embed 和 embed 两个接口的地址
2025-02-21 13:51:46 +08:00
bc37d687cf refactor(module-llm):增加响应成功日志- 在 RagHttpService 类中的两个不同方法中添加了多个日志输出语句
- 用于标记和记录响应成功的状态
2025-02-21 13:18:30 +08:00
c1a5833bec refactor(yudao-module-llm): 恢复文档嵌入逻辑
- 重新启用了对上传文件进行嵌入的逻辑
- 根据文件扩展名决定使用不同的嵌入方法
2025-02-21 11:20:11 +08:00
df92cc9ef4 Merge remote-tracking branch 'origin/master' 2025-02-21 11:12:47 +08:00
c4d8b68d91 refactor(module-llm):优化知识库创建文件方法
- 添加 @Async 注解实现异步处理
- 简化文件嵌入逻辑,暂时注释掉非 txt 文件的处理
-优化代码结构,提高可读性和性能
2025-02-21 11:12:31 +08:00
limin
9e2582d762 Merge remote-tracking branch 'origin/master' 2025-02-21 11:04:49 +08:00
limin
ce6b890133 修复 2025-02-21 11:04:37 +08:00
ire
2f9b1c32ac bug 2025-02-21 10:57:38 +08:00
503f031683 refactor(module-llm):优化知识库嵌入请求的超时设置
- 在 OkHttpClient 实例中添加了连接、读取和写入的超时时间设置- 将 knowledgeEmbed 方法中的 OkHttpClient 实例化过程进行了优化
2025-02-21 10:46:09 +08:00
limin
93e4f44bf5 修复 2025-02-21 10:29:49 +08:00
limin
b16c1c9957 Merge remote-tracking branch 'origin/master' 2025-02-21 10:17:42 +08:00
limin
c552063dea 修复 2025-02-21 10:17:32 +08:00
ire
9c0c7402cd bug 2025-02-21 10:17:02 +08:00
limin
1b25d0f767 修改 2025-02-21 10:08:25 +08:00
a4e5213a8e Merge remote-tracking branch 'origin/master' 2025-02-21 10:06:01 +08:00
886bcf85cf feat: 添加 application-ymx.yaml 配置文件
- 新增 YAML 配置文件,包含服务器、数据库、定时任务、消息队列等配置
- 添加微信公众号和小程序配置
- 配置大模型训练相关 API
-包含 IoT 相关配置
2025-02-21 10:05:40 +08:00
3a41fb9100 refactor(yudao-module-llm): 重构文件上传功能- 优化了文件上传的实现方式,使用 OkHttpClient 替代原有的 CloseableHttpClient
- 新增 getFileByte 方法获取文件字节数组
- 增加了对文件类型的处理,支持pdf
2025-02-21 10:03:14 +08:00
limin
53305996f6 修改 2025-02-21 09:18:51 +08:00
limin
8b4a56488f 修改 2025-02-20 14:52:41 +08:00
limin
7d1fd72db1 日志 2025-02-20 14:42:33 +08:00
681c12206e refactor(module-llm):重构知识库向量嵌入功能
- 移除 Async 注解和不必要的导入
- 优化 knowledgeEmbed 方法,使用 HTTP 客户端替代 Unirest
- 添加 fileUrl 字段到 KnowledgeRagEmbedReqVO
- 重构 ragHttpService.knowledgeEmbed 方法,支持文件 URL 上传
2025-02-20 14:26:37 +08:00
limin
06c832fa3f fix(llm): 修复模型训练过程中因服务不可达导致的空指针异常
- 在 AsyncModelAccessManualService 类中,对 trainHttpService.autoEvaluation 方法调用添加了异常处理
- 捕获 Exception 类型的异常,并将结果设置为 "bad",避免空指针异常
2025-02-20 14:24:53 +08:00
limin
dda11d401c Merge remote-tracking branch 'origin/master' 2025-02-20 14:04:36 +08:00
limin
f232d2a536 chore(llm): 添加 autoEvaluation 接口请求体的日志输出
- 在调用 autoEvaluation接口前,增加对请求体的 log.info 日志输出
- 有助于调试和排查接口调用问题
2025-02-20 14:04:28 +08:00
c7e4e71e48 refactor(module-llm):重构知识库向量嵌入功能并添加日志记录
-移除了 try-catch 块,简化了错误处理逻辑
- 在 KnowledgeRagEmbedReqVO 中添加了 fileBytes 字段
- 引入了 okhttp3 和 ok2curl 依赖,用于生成 curl 命令
- 在 RagHttpService 中添加了详细的日志记录,包括请求参数、生成的 curl 命令和响应内容
- 优化了代码结构,提高了可读性和可维护性
2025-02-20 14:02:56 +08:00
limin
05841ce69c fix(llm): 修复模型评估任务中的空指针异常
- 在自动评估过程中,增加了对模型回答为空的处理
-避免了因空回答导致的后续处理异常
2025-02-20 13:52:34 +08:00
limin
e49bc929e0 refactor(yudao-module-llm): 重构自动评估功能以支持多模型
- 修改 AsyncModelAccessManualService 中的 autoEvaluation 方法,增加 modelUrl 参数
- 更新 TrainHttpService 中的 autoEvaluation 方法,添加 url 参数
- 优化日志输出,增加自动响应内容的打印
2025-02-20 13:39:32 +08:00
11daa4436d refactor(yudao-server): 更新 API 服务地址
- 修改了 application-dev.yaml 和 application-local.yaml 文件中的多个 API 服务地址
- 将 IP 地址从36.103.199.278 更改为 36.103.
2025-02-20 09:52:14 +08:00
da1ad5a640 refactor(yudao-server): 更新 API 服务地址
- 修改了 application-dev.yaml 和 application-local.yaml 文件中的多个 API 服务地址
- 将 IP 地址从36.103.199.104 更改为 36.103.199.278
2025-02-20 09:48:21 +08:00
ire
313aaf37d6 基础模型api 2025-02-19 17:58:01 +08:00
f776becf00 refactor(llm): 修改 CSV 数据集答案字段名称
- 将 CsvDataSetVO 类中的 answer 字段重命名为 answers
- 更新 DatasetServiceImpl 中相关代码,使用新的 answers 字段
2025-02-19 17:17:26 +08:00
limin
c230296d18 修复模型部署 2025-02-19 16:44:37 +08:00
96d65952a3 refactor(llm): 调整细调任务同步服务执行频率
- 将 FineTuningTaskSync 定时任务的执行频率从每 3 分钟调整为每 1 分钟
2025-02-19 15:35:05 +08:00
limin
c6e1d57299 Merge remote-tracking branch 'origin/master' 2025-02-19 15:34:26 +08:00
ire
b14e76b763 基础模型api 2025-02-19 15:32:50 +08:00