当前系统订单跟踪存在哪些严重的bug2

订单跟踪系统严重 Bug 分析报告(第二期)

分析日期:2026-02-20
涉及版本:当前 main 分支


核心根因

所有严重 Bug 源于同一设计缺陷:

orderUpdates WS 消息仅含挂单价 limitPx,真实成交价在 userFills 消息中。但当前代码在 orderUpdates 到达时就删除追踪记录并唤醒等待线程,导致 userFills 的价格修正永远失效。

核心涉及文件:

  • src/trading/websocket_order_manager.py — 订单追踪核心
  • src/trading/executor.py — 下单与追踪流程
  • src/trading/position_manager.py — 仓位生命周期
  • src/trading/trade_repository.py — 数据持久化
  • src/utils/database/timescaledb.py — 数据库层

Bug 清单


🔴 Bug 1 — 成交价/成交量字段取错,导致价格数据系统性错误

文件: src/trading/websocket_order_manager.py:142-145

# _on_order_update 收到 "filled" 消息时
tracking.avg_price = float(order.get("limitPx", 0))   # ← 错误!limitPx 是挂单价,非成交价
tracking.filled_size = float(order.get("origSz", 0))  # ← 错误!origSz 是原始委托量,非实际成交量

问题本质

  • limitPx = 下单时设定的限价(挂单价格),对 Taker 成交而言可能与实际成交价不同
  • origSz = 委托总量,部分成交场景下实际成交量远小于 origSz

影响

  • position_manager._calculate_realized_pnl 使用的 order_result.leg_a.pricelimitPx,不是真实 avgPx
  • trade_orders 表中记录的 price 字段同样错误
  • PnL 计算偏差,尤其对 Taker 成交(市场快速移动时影响最大)

现有缓解措施executor._backfill_order_price() 在 fill 后通过 HTTP 额外查询修正,但见 Bug 4。


🔴 Bug 2 — userFills 价格修正机制失效(竞态条件)

文件: src/trading/websocket_order_manager.py:159-161 vs 163-190

问题描述_on_order_update 在调用 result_event.set() 之后立即删除追踪记录:

tracking.result_event.set()
with self._lock:
    self._tracking.pop(oid, None)   # ← 此刻追踪记录消失

随后到达的 userFills(含真实成交价 pxsz)在 _on_user_fill 中:

with self._lock:
    tracking = self._tracking.get(oid)   # ← 返回 None(已被删除)
if not tracking:
    continue   # ← 正确价格被完全丢弃!

两种时序均有问题

时序 场景 结果
orderUpdates 先到 最常见情况 tracking 已删除,userFills 修正无效;依赖 HTTP _backfill_order_price 修正
userFills 先到 偶发情况 _on_user_fill 设置了正确价格(px);但随后 _on_order_update 覆盖为错误的 limitPx

结论_on_user_fill 设计为提供真实成交价的功能,在所有场景下均无法生效。


🔴 Bug 3 — 无锁并发写入 tracking 字段(数据竞争)

文件: src/trading/websocket_order_manager.py:136-161, 181-190

_on_order_update_on_user_fill 均在释放 _lock修改 tracking 的字段:

with self._lock:
    tracking = self._tracking.get(oid)
if not tracking:
    continue
# ← 锁已释放!

# 以下写操作无保护:
tracking.status = OrderStatus.FILLED         # WebSocket 线程写
tracking.avg_price = float(order.get(...))   # WebSocket 线程写
# 同时 _timeout_then_verify 线程可能在写:
tracking.avg_price = ...                     # 超时监控线程写(via _resolve_via_http)

同样问题存在于 _on_user_fill:188-190avg_pricefilled_size 写操作。

潜在后果:多线程同时修改价格字段,CPython GIL 仅保证单条字节码原子性,不保证操作顺序和可见性。在高频场景下可能产生脏读/脏写。


🔴 Bug 4 — _backfill_order_price 总是额外 HTTP 调用(性能+可靠性)

文件: src/trading/executor.py:589-595

if tracking.status == OrderStatus.FILLED:
    ...
    # 回填真实成交均价(WS 可能只有 limitPx,HTTP 有 avgPx)
    self._backfill_order_price(order_result, coin)  # ← 每次 fill 都额外 HTTP 调用

_backfill_order_price每个成交的限价单发起 HTTP API 调用 query_order_by_oid

问题

  • 每次成交增加 50-200ms 延迟(在高波动市场中代价较高)
  • HTTP 调用可能失败(网络抖动、API 限速)。失败时仅记录 warning,使用错误的 limitPx 继续执行
  • 失败后 order_result.price 仍为错误的 limitPx,PnL 计算错误
# executor._backfill_order_price
except Exception as e:
    logger.warning(
        f"回填成交价异常(使用限价): {coin} oid={order_result.order_id} | {e}"
    )
    # ← 静默失败,price 保持 limitPx

🟡 Bug 5 — 超时监控线程大量堆积(资源浪费)

文件: src/trading/websocket_order_manager.py:63-65

threading.Thread(
    target=self._timeout_then_verify, args=(oid,), daemon=True
).start()

每个被追踪的订单创建一个守护线程,线程 time.sleep(timeout_seconds)(默认 600 秒)。

问题

  • 即使订单在 1 秒内成交,线程仍休眠近 10 分钟才退出
  • 高频下单时可能存在数百个空闲线程同时存在
  • 缺少线程数量上限,理论上无限增长

现有保护:线程是 daemon=True,进程退出时自动清理;超时后检查 if oid not in self._tracking: return 避免重复处理。但资源浪费仍存在。


🟡 Bug 6 — 平仓 DB 更新失败后状态不一致(重启后双重平仓风险)

文件: src/trading/position_manager.py:527-548 vs src/trading/trade_repository.py:198-203

平仓成功后执行流程:

# 内存操作(已执行)
position.status = PositionStatus.CLOSED
self._positions.pop(key, None)          # ← 内存中已删除

# DB 操作(可能失败,但异常被静默吞噬)
self._repo.update_position_status(...)  # 失败时:捕获 psycopg.Error,仅 logger.error
self._repo.save_order(...)

update_position_status 因 DB 故障失败:

  • 内存:仓位已关闭(_positions 中已删除)
  • DB:仓位状态仍为 CLOSING(更新失败)

重启后get_open_positions 查询 status IN ('open', 'opening', 'closing') 会返回此仓位,recover_positions_from_db 重新加载:

  • 若交易所已无此仓位 → 作为幽灵仓位关闭(无损)
  • 若交易所仍有持仓 → 再次尝试平仓,可能导致超量平仓或 DB 重复订单记录

🟡 Bug 7 — Leg B 平仓失败时 base PnL 丢失(统计失真)

文件: src/trading/position_manager.py:694-701

else:
    # Leg B 失败:用 mid_price 估算(仍有残留仓位,PnL 应计入)
    base_exit_price = self._executor.get_all_mids().get(symbol_to_coin(position.base_symbol), 0.0)
    if base_exit_price > 0:
        logger.warning(f"⚠️ Leg B 平仓失败,使用 mid_price 估算 base PnL: ...")

如果 base_exit_price = 0mid_price 也不可用),则 base_pnl = 0.0

问题

  • Leg B 仓位仍在交易所上,但系统按 base_pnl=0 记录到 DB
  • daily_trading_stats 中的 total_realized_pnl 不含 base 腿的真实盈亏
  • 系统认为该仓位已关闭,但实际 Leg B 转为孤儿仓位管理(_adopt_residual_base_leg),孤儿仓位平仓后的 PnL 不会合并回原仓位统计

🟢 Bug 8 — save_signal 异常静默吞噬(无监控告警)

文件: src/trading/trade_repository.py:91-92

except psycopg.Error as e:
    logger.error(f"保存交易信号失败: {signal.signal_id} | {e}", exc_info=True)
    # ← 异常被吞噬,无 Lark 告警推送

信号是整个交易链路的入口记录。信号丢失时缺乏告警通知,运营侧难以发现。其他关键操作(如开仓失败、平仓失败)均有 sender_colourful 告警,此处缺失。


🟢 Bug 9 — 数据库连接预验证无效

文件: src/utils/database/timescaledb.py:199

conn.isolation_level  # 触发异常如果连接无效

在 psycopg 3.x 中,isolation_level 是连接对象的本地属性(非数据库往返查询),对已断开的连接不会抛出异常。注释意图是"验证连接健康",但实际上此检查无效,失效连接仍会被 yield 出去,到实际 SQL 执行时才报错。


严重性总览

# 文件 问题摘要 严重性 交易资金影响
1 websocket_order_manager.py:144 limitPx 代替 avgPxorigSz 代替实际成交量 🔴 严重 PnL 计算错误
2 websocket_order_manager.py:159 userFills 价格修正机制完全失效(竞态) 🔴 严重 价格数据持续错误
3 多处 tracking 写操作 无锁并发写 tracking 字段(数据竞争) 🔴 严重 数据竞争,价格脏写
4 executor.py:589 每次 fill 额外 HTTP,失败时用错误价格继续 🔴 严重 失败时 PnL 错误
5 websocket_order_manager.py:63 每单一个休眠线程,高并发时线程堆积 🟡 中等 性能问题
6 position_manager.py:527 DB 更新失败后状态不一致,重启后双重平仓风险 🟡 中等 重启后资金风险
7 position_manager.py:694 Leg B 失败时 base PnL 丢失,统计失真 🟡 中等 统计数据不准确
8 trade_repository.py:91 save_signal 静默失败无 Lark 告警 🟢 轻微 可观测性缺失
9 timescaledb.py:199 连接预验证 isolation_level 在 psycopg 3.x 无效 🟢 轻微 无功能影响

建议修复方向

Bug 1-4(同一根因,统一修复)

推荐方案:在 _on_order_update 收到 "filled" 时,不立即删除追踪记录,也不立即 set event,而是标记为"等待 userFills 确认"状态。收到对应 userFills 后,用真实 px/sz 更新,再 result_event.set() 并删除追踪。

设置短超时(如 1 秒),若 userFills 超时未到,再降级为 HTTP 查询。

Bug 5(线程堆积)

threading.Event 替代 time.sleep,订单解决时通知超时线程提前退出,或改用单一 ScheduledExecutorService 风格的定时器线程池。

Bug 6(状态不一致)

平仓 DB 更新失败时应将仓位从内存恢复(或保留在内存中),并触发 Lark 告警,而不是静默失败。

Bug 3(数据竞争)

修改 tracking 字段时持有 _lock,或将 tracking 的字段改为线程安全类型。

Read more

跑步的技巧(滚动落地)

“滚动落地(rolling contact / rolling foot strike)”不是一种教条式的“脚法”,而是一种 让冲击沿着整只脚、整条后链逐级传递的落地机制。 它的核心不是“你先用哪儿着地”,而是: 你的脚落地之后,冲击是不是像轮子一样滚过去,而不是像锤子一样砸下去。 这就是滚动落地的本质。 一、什么叫“滚动落地”? 你可以把它理解成两种完全不同的落地方式: 1. 砸地(撞击式) 脚像锤子一样拍到地上: * 要么后跟先砸 * 要么前掌先戳 * 冲击集中在一个点 * 一个结构瞬间吃掉大部分载荷 结果就是: * 后跟砸 → 膝盖难受 * 前掌戳 → 前脚掌磨烂 * 都不是长跑友好模式 这叫 撞击式着地(impact strike)。 2. 滚地(滚动式) 脚像轮胎一样“滚”过地面: * 不是某一点硬砸 * 而是外侧中足先轻触 * 再向前滚到前掌 * 最后从大脚趾蹬离

By SHI XIAOLONG

AMI的优越性

世界模型(World Models)的具体例子 如下,我按类型分类,便于理解。每类都附带实际实现、演示效果和应用场景。 1. Yann LeCun / Meta 的 JEPA 系列(最直接对应“世界模型”概念) 这些是 LeCun 主张的非生成式抽象预测世界模型代表。 * I-JEPA(Image JEPA,2023) 输入一张图像,模型把不同区域(context 和 target)编码成抽象表示,然后预测 target 的表示(不在像素级别重建)。 例子:给定一张遮挡了部分物体的图片,模型能预测“被遮挡物体的大致位置和属性”,构建对物体持久性和空间关系的理解。 这是一个“原始世界模型”,能学习物理常识(如物体不会凭空消失)。 * V-JEPA / V-JEPA 2(Video JEPA,

By SHI XIAOLONG

什么是:“世界模型(World Models)”

世界模型(World Models) 是人工智能领域的一个核心概念,尤其在 Yann LeCun 等研究者推动的下一代 AI 架构中占据中心位置。它指的是 AI 系统在内部构建的对现实世界的抽象模拟或内部表示,让机器能够像人类或动物一样“理解”物理世界、预测未来、规划行动。 简单比喻 想象你闭上眼睛也能“看到”房间里的物体会如何移动、碰撞或掉落——这就是你大脑里的世界模型。AI 的世界模型就是类似的“数字孪生”(digital twin)或“内部模拟器”:它不是简单记住数据,而是学习世界的动态、因果关系和物理直觉(如重力、物体持久性、遮挡、因果等)。 为什么需要世界模型? 当前主流的大型语言模型(LLM) 擅长处理文本(统计模式预测),但存在根本局限: * 缺乏对物理世界的真正理解 → 容易“幻觉”、无法可靠规划。 * 样本效率低 → 人类/

By SHI XIAOLONG

K线周期可配置化设计方案

K线周期可配置化设计方案 1. 背景与目标 当前 Beta 套利策略的 K 线周期硬编码为 "1h",分散在多个文件中。需要: 1. 将 K 线周期从 1h 改为 2h 2. 提取为环境变量 BETA_ARB_KLINE_INTERVAL,使其可在 .env 中配置 2. 影响范围分析 2.1 需要修改的文件(共 6 个) 文件 硬编码位置 修改内容 src/trading/config.py BetaArbConfig dataclass 新增 kline_interval 字段,

By SHI XIAOLONG