sanguo/sanguo_vnpy_v2
2
0
Fork 0
Code Issues 5 Pull Requests Actions Packages Projects Releases Wiki Activity
359 Commits 4 Branches 1 Tag
master
Commit Graph

19 Commits

Author SHA1 Message Date
claude_dev 3b3e42985e fix(datareader): read_index_daily 切 dbbardata(治 benchmark 读陈旧 vnpy DbBarData)
CI/CD / test (push) Successful in 9s
Details
CI/CD / nas-deploy (push) Successful in 24s
Details
CI/CD / nas-verify (push) Successful in 3s
Details 
cta_engine benchmark 经 read_index_daily 读 vnpy DbBarData(方案A前陈旧源)。
切 dbbardata(指数点位已由 sina_index_eod 灌 exchange=SSE)。

- 数据源:vnpy get_database.load_bar_data → sqlite3 直连 dbbardata
- 消除覆写 vnpy SETTINGS 副作用(cta_engine.py:73/199)
- 回归坑1(000300读空):CODES 已加 000300 → dbbardata 有数据(本轮修复)
- 回归坑2(sz000905):默认 benchmark sh000300 不触发;中证指数用 sh 前缀
- 复用 provider 模式:substr(datetime,1,10) 比日期规避混合格式
- 测试:mock vnpy → 真实 tmp sqlite 库测 SQL 路径(2测重写)
- 验证:Mac 4+5 passed + VPS 真实库 sh000300 7月23行 close4588.197
 2026-08-01 08:41:57 +08:00
claude_dev bdad396243 test(data): 重写 read_index_daily 测试对齐 vnpy 实现(消 latent fail) 
原 2 测试测"读 parquet"(旧实现),实现早已改读 vnpy DbBarData→一直 latent fail
(KeyError→防崩溃后 RuntimeError)。套 test_datareader 的 vnpy mock 模式重写:
测 load_bar_data 返回 DataFrame + start/end 委托 vnpy 过滤。

注:read_index_daily 切 dbbardata 根治待定(000300 不在 dbbardata/000905 exchange
约定不匹配),见 memory read-index-daily-dbbardata-migration-pending。
 2026-07-29 21:29:14 +08:00
claude_dev e91b103f7a docs(data): Phase2 归档旧回填/import链+15m灌库链(VPS schtask实证线头死) 
VPS schtasks /query: 调用这些脚本的 schtask 全已禁用(baostock_day1/2,
xtdata-build, index-hist, bs-daily-increment 等),且不被8个活跃wrapper引用。
活跃白名单(保留): bs_eod/xt_eod/sina_index_eod/akshare_static_download/
index_const_hist_download/merge_constituent/migrate_constituent/parse_csindex_announce

- _archive/backfill_legacy/: 31个(旧回填import链+旧baostock下载+禁用wrapper+Mac .sh链)
- _archive/backfill_15m/: 7个(15min灌库链+hardening测试,backfill已完成)
- 关键实证: index_const_hist_download 被 index_monthly_wrapper(活跃)调用→保留不归档
- 无残留import(fetch_with_fallback是sanguo_data函数非fallback模块)
 2026-07-29 11:56:44 +08:00
claude_dev e3b688354f fix(data): data_platform硬化(增量merge/verify+raw_redownload/run_daily_update)+测试 
merge_increment/verify_increment 增量staging→验证→合并工具; raw_redownload/run_daily_update/import_vnpy_daily 强化; 补 data_platform 与 index_downloader 测试.
 2026-07-15 07:12:46 +08:00
claude_dev c041227139 chore: gitignore放行tests/data+docs/data(老坑data/误伤)，补回硬化测试 
data/ 规则匹配任意 data 目录，误伤 tests/data（硬化测试）和 docs/data（15min设计文档），
此前靠 git add -f 临时绕。加 !tests/data/ !docs/data/ 例外一劳永逸。
 2026-07-13 11:59:39 +08:00
claude_dev a1048690c1 test: 前后端对齐—容器复跑验证+清理僵尸测试 
- test_main: FastAPI 0.139 _IncludedRouter 不再 flatten，改用 TestClient 探测路由
- datareader: 文件名(sh600000_daily)/patch target(vnpy.trader.database) 对齐 lazy import 实现
- alpha_lab/analyzer/data_adapter: vnpy.alpha/alphalens 容器专用本地 skip
- 删 4 个测废弃 sanguo_web 的僵尸测试（-1267 行死代码）
- pytest.ini: asyncio_mode=auto
- frontend: package.json 加 test script（npm test 可跑）
- NAS 容器 309 passed 全绿验证（Python 3.10，本机 303+6skip）
 2026-07-11 11:45:26 +08:00
claude_dev 1ed7b72aca feat(data): raw真实价数据源(task#79)—raw_dir+dir_key路由+新浪源重下 
根因: daily_dir mixed-adjust(hfq bulk+akshare raw tail)致3-30 -94%假跌。
方案(Linus三问简化单raw, 除权留分期项#3):
- datareader read_parquet_daily/15min 加 dir_key 参数
- data_source iter_bars/fetch_day: adjust=raw→raw_dir(缺配置报错防混源), qfq→daily_dir
- engine PaperEngine 默认 adjust=raw
- config 加 raw_dir; scripts/raw_redownload.py 新浪源adjust='' 直连+单线程限速
- 验证: 浦发606行close 6.5/14.6 mean10.08 0跳变, 撮合成交价9.71-10.25真实
- 测试9/9+trader全量108/108通过
 2026-07-07 22:19:11 +08:00
claude_dev 88295011f9 fix(data): spike 测试隔离（mock load_bar_data 避免 SETTINGS 污染） 2026-07-05 21:59:32 +08:00
claude_dev 339d85a927 fix(data): read_db_daily 配置 vnpy database 路径（修端到端读取 gap） 
Fix: read_db_daily 现在在调用 get_database() 前配置 vnpy SETTINGS，
指向 cfg.data_paths["vnpy_db"]（NAS quant_trading.db），修复端到端冒烟发现的读取 gap。
 2026-07-05 21:03:03 +08:00
claude_dev cdde469120 test(data): vnpy 4.4.0 接口 spike + 端到端冒烟 2026-07-05 16:18:05 +08:00
claude_dev c6eae7eecf feat(data): UpdateScheduler 增量 + 断点续传 + 熔断 2026-07-05 16:14:23 +08:00
claude_dev 60b410b887 feat(data): DataWriter 原子写 parquet + vnpy SQLite 2026-07-05 12:43:18 +08:00
claude_dev 3015d6fa6b feat(data): DataFeed 多源 fallback + BaoStock 超时修复 2026-07-05 12:41:00 +08:00
claude_dev 4e541040f1 feat(data): DataReader SQLite + 交易所判断 + vnpy 4.4.0 spike 点 2026-07-05 12:36:34 +08:00
claude_dev 91d9c36f44 fix(data): Task 3 移除 vnpy mock，用真实 vnpy 源码 
- 删除 tests/data/vnpy_mock.py
- conftest.py 加 vnpy_v4.4.0 源码到 sys.path（真实 vnpy import，不拉 Qt）
- 5 passed（config 2 + validator 2 + datareader 1）
 2026-07-05 12:28:59 +08:00
claude_dev 10bdc65ac5 feat(data): DataReader parquet 读取 → BarData 2026-07-05 12:04:50 +08:00
claude_dev 56fbde6492 feat(data): 移植 v1 validator + 适配接口 + 测试 2026-07-05 11:53:51 +08:00
claude_dev 3422372948 fix(data): Task 1 review 修复（pycache清理+pytest.ini+错误处理） 
- Fix 1: 移除误 commit 的 __pycache__ 文件
- Fix 2: 创建 pytest.ini 解决 PYTHONPATH 问题
- Fix 3: load_config 添加错误处理（FileNotFoundError + ValueError）

Co-Authored-By: Claude <noreply@anthropic.com>
 2026-07-05 11:50:30 +08:00
claude_dev 90f0b68ce2 feat(data): 脚手架 + YAML 配置加载 2026-07-05 11:41:57 +08:00