sanguo/sanguo_vnpy_v2
2
0
Fork 0
Code Issues 5 Pull Requests Actions Packages Projects Releases Wiki Activity
279 Commits 4 Branches 1 Tag
7f550d2eb241d79e8f23d0fe7112eb92f2ad53d7
Commit Graph

27 Commits

Author SHA1 Message Date
claude_dev c3e53fbef3 docs(data): 归档数据层验证产物 + 数据层总览README 
- scripts/data_platform/_archive/legacy/: 归档20个独立探针/诊断/旧降级脚本(零引用验证)
- docs/archive/data/: 归档17个数据相关旧设计/plan/report(保留fusion spec作深读)
- docs/data-platform/README.md: 数据层单一权威记录(8节:架构/布局/源/管线/铁律/API/缺口/待办)
- 删除 _mootdx_depth_result.txt
- Phase2待办: 15m灌库链+旧回填import链(有测试/wrapper依赖,VPS schtask确认后归档)
 2026-07-29 10:11:38 +08:00
claude_dev e7465c342f feat(data): 中证1000/2000 定期更新 schtask + schtask 路径坑修复 
sanguo-index 增强: index_monthly_wrapper 加 STEP0 parse_csindex_announce
(治偏差全集, 月度16号自动刷新 constituent_unified)

register_akshare_schtasks 修 PowerShell schtasks /tr 反斜杠路径丢前缀坑:
$ws 变量在双引号被原生命令解析吃掉 -> Arguments 存成 \xxx.ps1 ->
schtasks /run 返回成功但 wrapper 静默不跑从不写日志。改全路径硬编码 + --%。
ak-* 5 schtask 路径全坏已批量修(register_akshare 旧版"已部署Ready"是假成功)。

诊断: Get-ScheduledTask 中文Win报 0x80070057 无用, 改 schtasks /query /xml
看 Arguments 才发现丢前缀。

schtask 全链路验证 STEP0-3 exit=0, constituent_unified
000852=1672(was_removed=672) / 932000=2684(684) 治偏差保持。
 2026-07-24 00:20:36 +08:00
claude_dev ae3a768091 docs(data): akshare 低频 schtask plan(spec §14.5 A+B+C) 
spec §14.5 akshare/index 低频 schtask 部署 plan, 待 compact 后新 session 执行:
- A 三表/估值增量(sanguo-ak-eod 日频 + ak-quarter 季频, --force 全量夜间慢跑)
- B 成份股月度(sanguo-index, 改 merge_constituent 可重跑 DROP/REPLACE + 3源wrapper + TDD)
- C 事件类 7 种(ak-events per-date 日频 + ak-stock per-stock 周频)

实测现状: static 停 7/22 18:25(provider依赖) / events 全空(从未采集) /
constituent_unified 7110 静态 / 旧 schtask 全无(方案A stop_all 清了)

关键约束: akshare marker symbol级→三表/估值必须--force更新 / per-stock全量慢+东财限流→夜间 /
merge_constituent RENAME不可重跑→改幂等

plan 自包含(fresh agent 可执行), 关联 memory akshare-low-freq-plan
 2026-07-23 08:49:56 +08:00
claude_dev 41cc6d13bf feat(portfolio): LocalUnifiedProvider spec §6 使用层落地 + VPS E2E(Task6) 
spec §6 使用层 provider — 读方案A 权威数据层, 零 online, 治幸存者偏差:
- get_price: dbbardata('d') raw + bs_adjust_factor 前复权(asof, qfq[t]=raw[t]*factor[t])
- get_index_stocks/get_constituent: constituent_unified 并集治偏差(300=940含被踢, 无date时点)
- get_fundamentals_df: baostock pe/pb/ps/pcf + akshare 市值 + 三表委托 LocalParquetProvider
- 辅助: trade_days/security_info/current_tick/split_dividend/all_securities

VPS E2E 实证修复(Mac fixture 盲区):
- dbbardata datetime 混合格式("2024-09-26" vs "2024-09-26 00:00:00")
  → pd.to_datetime format='mixed' + SQL substr(datetime,1,10) 比日期(字符串比漏边界)
- 补 TestMixedDatetimeFormat 单测覆盖

验证: VPS 真数据 E2E 全通过(600519在市raw/qfq复权/000005退市治偏差/510300ETF/
fundamentals市值+pe+eps全字段/辅助方法); Mac 37单测+149回归绿

交付: 使用说明 docs/portfolio_local_unified_provider.md(其他 session 直用)+
plan+probe+E2E 脚本
 2026-07-23 08:25:44 +08:00
claude_dev c2a89d01a4 feat(data): 方案A 数据层落地(spec §14)— DB唯一表+治幸存者偏差+权威源 
spec §14 方案A 数据层迁移完成 + E2E 验证(read_db_daily: 在市/退市治偏差/ETF 全OK):
- dbbardata('d') 1826万含退市(治回测幸存者偏差, INSERT OR REPLACE staging迁移, WHERE OHLC NOT NULL+COALESCE)
- constituent_unified 7110行/9指数(300/500/50 baostock全集 + 深证4指 akshare cni union + 中证1000/2000 snapshot)
- pe/pb 不进DB -> valuation_baostock/<year>.parquet 按年宽表(2003-2026)
- 废弃 daily_baostock_full/bs_index_constituent(rename _old 保留); 旧4 schtask disabled
- 新 schtask sanguo-bs-eod 18:05(baostock个股日线+15min+拆pe/pb DAILY_LIMIT 48000) + sanguo-xt-eod 18:40(ETF/基金xtata)
- 权威源: baostock个股日线+估值+15min+复权+300/500/50 / xtata ETF+基金+当天实时 / akshare三表+事件+深证中证成份股
- 全程备份+staging+_old保留可回滚; 脚本 audit/probe/migrate/merge/cleanup/fix_config/verify/bs_eod/xt_eod/wrapper/register_schtasks
- 待办(spec §6 使用层): LocalParquetProvider 接 constituent_unified+valuation_baostock + 实时拼接
 2026-07-23 07:20:34 +08:00
claude_dev 774170ec05 feat(data): 数据源融合 P0 补全 + 每日增量脚本 
采集层(多源各下):
- baostock: 日线全字段全量(baostock_daily_fullmarket) + 15min全市场 + 静态(基础/复权/分红/季频/三表) + 成份股
- akshare: 静态(估值/龙虎榜/大宗/融资融券/北向/指数成分/行业/股本/解禁/业绩预告)
- xtdata(miniQMT): build_daily_from_xtdata + daily_update_xtdata

数据补全 P0:
- ETF全市场: universe 扩展 沪深A股∪ETF∪基金(7414), dividend_type='front' 前复权
- 历史成份股(治幸存者偏差): index_const_hist_download 深证/国证 adjust_cni 4指数 + 中证1000/2000快照 + 新浪交叉校验
- 退市K线: baostock_delisted_download + import_delisted_to_db(实证 Day1 fetch_all_stocks 已含退市)

灌库:
- import_baostock_to_db: daily_baostock_full(5537股/1826万行,18字段)+ bs_index_constituent + bs_adjust_factor
- INSERT OR REPLACE 幂等, WAL+busy_timeout, dbbardata 不碰

每日增量 #7(用户决策A: VPS直跑):
- daily_update_static: login探针防黑名单graceful skip + LOOKBACK7 + query_stock_basic含退市 + INSERT OR REPLACE + QUERY_COUNT守48000/天

设计文档: spec(13节三层融合) + P0 plan + 数据gap设计
 2026-07-22 10:34:22 +08:00
claude_dev e1b8c4ac68 docs(plan): 富回测结果页实施计划—8任务TDD(metrics→数据→引擎→API→前端→部署) 2026-07-11 13:20:30 +08:00
claude_dev 6c461d4d9c docs(spec): 富回测结果页设计(v1)—聚宽级10指标+5图+4tab, empyrical后端算相对基准指标 2026-07-11 13:16:49 +08:00
claude_dev 928a52b96f docs(live): D期§8更新—D-2含bridge完善+半自动更新, D-4b加120141诊断, 运维发现(120141/行情关/重连/token分离) 2026-07-11 08:33:51 +08:00
claude_dev a93d5ed8d8 docs(live): D期§8状态更新—D-1/D-2/D-3/D-4a/D-4c验证通过, 仅D-4b等周一 2026-07-11 06:31:53 +08:00
claude_dev 379836d34e docs(live): D期任务状态更新(D-1/D-3完成)+Windows部署联调清单 
- 设计文档§8: D-1/D-3标✅代码完成+commit号, D-2/D-4待Windows, 附代码层验证说明
- d-phase-windows-deploy.md(新): Windows端一站式清单(D-1实测/D-2自启/D-4a联调/故障排查)
 2026-07-11 00:07:18 +08:00
claude_dev ff84b3d4b0 feat(live): D-3 sanguo实盘分支(影子下单)+D期设计文档 
D-3 模式A影子下单(spec §5):
- bridge_client.py: QMT bridge HTTP客户端(urllib, X-Bridge-Token, 失败不抛返回None)
- live_orchestrator: _shadow_trades_to_bridge 当日成交POST bridge(默认enabled=false)
- persistence: paper_shadow_orders幂等表+save_shadow_order/is_trade_shadowed
- config: data_platform.yaml加live段, token走env(BRIDGE_TOKEN)
- to_bridge_code symbol转换与guess_exchange一致(2位前缀)
安全: enabled=false默认关+token走env+幂等防重复+影子失败不阻断live_step

docs: phase3d-live-trading-design.md(D期完整设计)
 2026-07-11 00:03:46 +08:00
claude_dev 7c7976221b docs(spec): phase3c-design §295分期项标记完成(分红送股+占用成本落地) 2026-07-10 08:46:14 +08:00
claude_dev 1b87d3f7c0 docs(plan): Phase 3c 模拟盘实现计划（C-S0~S3，19 任务） 
C-S0 引擎核心 TDD 完整代码（models/limit/position_ledger/matcher）；
C-S1 回放端到端接口+验收（适配器/引擎/双源/持久化/API/前端）；
C-S2 分户归因；C-S3 实走。含 self-review。
 2026-07-07 09:34:41 +08:00
claude_dev 6c0acd2374 docs(spec): Phase 3c 模拟盘设计 v2（吸收架构+业务双 review） 
架构 + A 股业务双 sub-review 后修正 6 项 CRITICAL + 4 项 HIGH：
- 复权双数据源（qfq 信号 / raw 撮合），解涨跌停系统性失真
- 涨跌停板块表（主板±10/ST±5/创业科创±20/北交所±30）+ 封板判据收紧（T字板保守拒单）
- match_session 多撮合时点（next_open/current_close），支持尾盘抓涨停类策略
- 资金 T+0、印花税 0.05%（2023.8.28 新规）+ 过户费 + 最低佣金 5 元
- StrategyRunner 明确为 CtaTemplate 适配器（PaperCtaEngine 拦截 send_order）
- 任务模型：回放走共享 DB 进度+checkpoint 续跑；实走 APScheduler 启动恢复
- owner_id/checkpoint_date/scheduler_job_id 字段补齐
- 分红送股/归因软限额/科创200股/集合竞价 标注分期（C-S3 后）
 2026-07-07 09:28:58 +08:00
claude_dev 759acf2f6c docs(phase3b): Phase 3b Vue 前端实施计划（S0-S3，含 result_id bug 修复） 2026-07-07 00:33:28 +08:00
claude_dev f0f08d32c3 docs(phase3b): 投研+回测 Web 控制台（Vue 前端）设计文档 
- 4 期愿景：投研→回测→模拟→实盘（国金QMT），本期 B=投研+回测
- 对齐 vnpy client 回测模块 + 投研自有
- 技术栈 Vue3+Vite+TS+ElementPlus+ECharts+Pinia
- 部署：8000 切 sanguo_api，Vue 静态挂 FastAPI，不动端口/反代
- 含后端补 5 类接口（资金曲线/每日盈亏/成交/K线/报告）
- 4 切片 S0→S1→S2→S3
 2026-07-07 00:25:31 +08:00
claude_dev b2c2a1305b docs(phase3a): Web API 完整化完成报告（8 task, 44+74 passed, NAS smoke 6/6, 已合并 master） 2026-07-06 20:22:54 +08:00
claude_dev b3cb6fd7cf docs(phase3a): Web API 完整化实现计划（8 task，TDD） 2026-07-06 17:36:12 +08:00
claude_dev 3369ea2433 docs(phase3a): Web API 完整化 design（异步 pool + WS 阶段 + JWT 单用户 + tears 完整化） 2026-07-06 17:22:45 +08:00
claude_dev d9c4f15bc9 docs(phase2): 因子/回测层完成报告（13 task, 54+4 passed, 覆盖率 81%, 端到端冒烟通过） 2026-07-06 11:47:50 +08:00
claude_dev a480fd389f docs(phase2): 因子/回测层实现计划（13 task：3 spike + 10 实现，spike 先行） 2026-07-06 07:25:53 +08:00
claude_dev 83ca15b57b docs(phase2): 因子/回测层 design（brainstorming 3 轮确认，待 review） 2026-07-05 23:47:07 +08:00
claude_dev 6da8a55b5e docs(phase1): 数据层完成报告 + 端到端冒烟脚本 2026-07-05 23:47:07 +08:00
claude_dev 9595879655 docs: 新增 Plan 1 数据层实施计划 
8 个 TDD task：脚手架+配置 / validator / DataReader(parquet+SQLite) /
DataFeed(多源fallback+BaoStock超时) / DataWriter(原子写) /
UpdateScheduler(增量+断点续传+熔断) / vnpy 4.4.0 spike + 端到端冒烟
含 self-review 与执行指引
 2026-07-05 11:31:20 +08:00
claude_dev f255e5062e docs: 新增 vnpy 量化平台第一阶段架构设计 
基于 PRD 落地分层架构：
- 数据层（继承 v1，双存储 parquet+SQLite，cron+Web 更新）
- 因子/回测层（vnpy.alpha 可插拔扩展 + BacktestingEngine 多进程优化）
- Web API 层（FastAPI 自建 + JWT + 回测任务 pool）
- 前端（Vue 3 + Vite + Naive UI，替换原生）
- 部署（NAS Docker，uvicorn 单进程避 fork 坑）
含早期 spike 与 ADR 对应表
 2026-07-05 11:08:59 +08:00
claude_dev 3d20489761 docs: 新增 vnpy 量化平台第一阶段 PRD 
沉淀 superpowers brainstorming 多轮讨论：
- 项目初衷、核心原则（不改 vnpy/面向未来/复用 v1 数据）
- 第一阶段范围（A 股回测+策略开发闭环）与后续 spec 规划
- 8 条架构决策（ADR）：不引 Qlib/不用 Celery/vnpy 零改造/
  复用 v1 数据丢弃 v1 回测/国金模拟独立/弃内嵌架构/
  webtrader 按需启用/因子层可插拔
- v1 数据资产继承清单 + 数据源踩坑黑名单
- 风险与待决策项
 2026-07-05 10:54:15 +08:00