From 298975727cd6b29deb1581a3ff45832d406b3eb7 Mon Sep 17 00:00:00 2001 From: cfdaily Date: Tue, 5 May 2026 00:04:25 +0800 Subject: [PATCH] auto-sync: 2026-05-05 00:04:25 --- data_platform/daily_all_update.py | 11 ++++++++++- 1 file changed, 10 insertions(+), 1 deletion(-) diff --git a/data_platform/daily_all_update.py b/data_platform/daily_all_update.py index 6c52347b..667f613c 100644 --- a/data_platform/daily_all_update.py +++ b/data_platform/daily_all_update.py @@ -3,9 +3,13 @@ 全市场每日增量更新 - 日线 + 15分钟线 功能: - 1. 日线:腾讯K线API → 更新Parquet + vnpy DB + 1. 日线:东方财富API(主) + 腾讯API(备) → 更新Parquet + vnpy DB 2. 15分钟线:新浪API(800条) → 增量合并Parquet + 导入vnpy DB +数据源降级链: + 日线: 东方财富(amount真实,可拿多年) → 腾讯(amount有时0) + 15min: 新浪(amount真实,800条) → 无备源 + 设计原则: - 增量更新,不重复下载 - 失败不影响其他股票 @@ -27,6 +31,11 @@ - 全局源不可用检测(连续30只首次失败→终止) - DB轮转备份(保留7天) - 失败率>5%告警 + v1.2 (2026-05-05) - 东方财富集成: + - 日线主源从腾讯切换为东方财富(amount真实,可拿多年历史) + - 腾讯降为日线备源 + - 东方财富限频:4s/请求 + 随机抖动±1s + - 反爬:Referer + 完整UA + ut参数 + JSONP """ import argparse