 Serendipity
|
3308636086
|
refactor: 去重删除逻辑统一到 VectorDB.delete_by_source
|
2026-07-10 15:27:52 +08:00 |
|
|
Serendipity
|
6a5be5f3e7
|
fix: ingest_obsidian 初始化添加异常处理和友好错误信息
|
2026-07-10 15:21:29 +08:00 |
|
|
Serendipity
|
0a4a4c766c
|
fix: search_documents 端点添加异常处理防止 traceback 泄露
|
2026-07-10 15:18:46 +08:00 |
|
|
Serendipity
|
405303e82c
|
fix: 修复 44 个代码审查问题 (CRITICAL/HIGH/MEDIUM/LOW)
Batch 1 — CRITICAL (1):
- 提取 is_safe_path() 到 src/core/security.py 公共模块
- CLI 和 ingest_obsidian.py 统一添加路径遍历防护
Batch 2 — HIGH (13) + 架构重构:
- CLI 复用 deps.py AppState, 消除 30 行重复代码
- AppState/get_state 添加线程安全锁
- serve 命令传递 --config 到 uvicorn (H1)
- OpenAIEmbedder 懒创建+复用 HTTP 客户端 (H2)
- DashscopeEmbedder import 移到模块顶部 (H3)
- 路径检查改用 os.path.commonpath (H4)
- embedder.embed() 返回值长度检查 (H5)
- 健康检查不泄露内部错误详情 (H7)
- /api/v1/collections 添加 API Key 认证 (H8)
- API Key 使用 hmac.compare_digest 恒定时间比较 (H9)
- 添加 CORS 中间件 (H10)
- ServerConfig 支持 SSL 配置 (H11)
- HF_ENDPOINT 修改添加详细注释 (H12)
Batch 3 — MEDIUM (20) + Splitter Protocol:
- 定义 Splitter(Protocol) 接口, DocumentIngestor 接受可选 splitter
- DashScope 响应添加结构验证 (M2)
- ingest_obsidian.py 支持 CLI 参数和 OBSIDIAN_DIRS 环境变量 (M6)
- scripts/serve.py 添加废弃警告 (M7)
- content 限制 500KB, collection 正则限制字符集 (M12-M14)
- 默认监听地址 127.0.0.1 (M16)
- 添加安全响应头中间件 (M17)
- verify_api_key 认证失败记录日志 (M19)
Batch 4 — LOW (10):
- CLI emoji 清理为纯文本标记 (L5)
- logging.basicConfig 移到 FastAPI lifespan (L1)
- VectorDB 添加 write_guard() 上下文管理器 (L3)
- IngestRequest file_path/content 互斥校验 (L10)
- ingest_obsidian.py 注释修正 (L6)
测试: 46 → 70 (+24)
- tests/test_security.py: 11 个路径安全测试
- tests/test_deps.py: 11 个依赖注入测试
Co-Authored-By: Claude <noreply@anthropic.com>
|
2026-07-06 16:56:38 +08:00 |
|
|
Serendipity
|
eebdef739c
|
fix: 修复 MarkdownSplitter 死循环 + 添加 GPU 自动检测
- ingest.py: _split_single_paragraph 中分隔符距 start 小于 overlap 时
start 会回退为负数，Python rfind 负索引导致无限循环
修复: start = max(start + 1, next_start) 确保始终前进
- embedder.py: LocalEmbedder 自动检测 CUDA，优先使用 GPU
- ingest_obsidian.py: MAX_SIZE 调整为 200KB 适配 GPU 嵌入
- 清理临时日志文件
|
2026-07-06 00:04:04 +08:00 |
|
|
Serendipity
|
d141baf964
|
fix: use path hash prefix for source_file names to prevent same-name collisions; add size filter to ingest script
|
2026-07-05 04:46:47 +08:00 |
|
|
Serendipity
|
2c1dcf22cf
|
feat: add serve script and console entry point
|
2026-07-05 01:46:45 +08:00 |
|