战争迷雾
只使用本队可见信息,训练模型处理侦察、记忆与信息不完全。
REINFORCEMENT LEARNING / RTS RESEARCH PLATFORM
面向 PC 版《铁锈战争》的强化学习研究平台。通过 RWPP Headless、结构化状态和动作桥,把真实战场接入 Gymnasium、PPO 与安全推理闭环。
GAME / STEAM APP 647960
官方商店实机画面。这里发生的大规模单位交战、基地建设和迷雾侦察,就是 IronZero 要接入的真实战场。
TARGET GAME / RUSTED WARFARE ↗
游戏画面版权归 Corroding Games 所有,来自 Steam 官方商店,仅用于非官方研究项目的游戏识别与介绍。
只使用本队可见信息,训练模型处理侦察、记忆与信息不完全。
采矿、收入、建造顺序与生产队列共同决定长期策略。
实体集合、编队控制和局部决策必须适应大规模战场。
基地、工厂、防御和资源点构成完整 RTS 行动空间。
01 / MISSION
核心工作不在 PPO,而在游戏状态一致性、动作合法性、episode 重置和版本锁定。
复用真实单位、寻路、战斗和战争迷雾规则,而不是用截图或简化模拟器替代游戏。
RWPP / JAVA使用 tick、实体集合、局部地图和动作掩码,把 RTS 战场转换成模型可消费的观测。
GYMNASIUM / JSON模型输出经过 schema、动作掩码、可见性检查和限频,再进入游戏线程命令队列。
SAFE / MASKED02 / LIVE SANDBOX
下面不是示意图,而是一场真实 1.15 无头对局的回放:Lake 地图 tick 56821–60001,画面内 53–54 个单位,双方兵力 19 : 34 打到 22 : 32,本段落累计 2941 点伤害。
桥接层按仿真步长批量推送状态快照(实测间隔 5–50 tick,多为 10),经 loopback TCP 落成 frames.jsonl,沙盘按绝对游标增量取帧。
地形取自游戏原版 tileset,单位贴图按 unitSprites 清单解析,与网页沙盘同一套素材。
镜头窗口按片段内的实际伤害重心定位,而不是简单包围盒,避免画面落在空白湖面上。
该片段由 tools/render_sandbox.py 从记录数据渲染,非浏览器截图;游戏素材版权归 Corroding Games 所有,仅用于非官方研究项目。
03 / TRAINING LOOP
读取本队可见单位、资源、建筑和迷雾状态。
全局标量、实体集合与局部地图融合编码。
PPO 策略在动作掩码约束下选择单位组命令。
动作经过安全层和游戏线程队列执行。
按 tick 对齐 reward、done 与 GAE 训练信号。
04 / ARCHITECTURE
PPO · GAE · Checkpoint · Metrics
reset · step · reward · done
NDJSON · TCP · schema · sequence
snapshot · action queue · game thread
RWPP Headless · assets · fixed tick
$ python -m unittest discover -s tests -v
Ran 20 tests in 0.026s
OK
$ python tools/validate_schema.py
validated 6 sample messages
$ .\scripts\smoke_rwpp.ps1 -RuntimeDir ... -Ticks 180
M1 harness ready / real runtime pending
全局资源、实体集合、局部地图和可见性版本。
移动、攻击移动、指定目标、停止和保持。
采样时约束,执行前基于最新状态再次校验。
一环境一进程,独立端口、日志和 episode。
超时兜底、急停、限频和不可见目标拦截。
固定种子、轨迹哈希、版本清单和回放回归。
05 / ROADMAP
IronZero v1 schema、动作模型、顺序校验和测试基线。
1.15 客户端、Java 25、RWML 与 RWPP 无头服务端完成 180 tick 实测。
读取 tick、单位、资源、地图和迷雾,验证观测一致性。
固定 micro 场景、动作回执、随机基线,再接入训练闭环。
固定评估集、内网人机对战、模型晋级和可审计回放。
06 / OPEN SOURCE
原创代码采用 Apache-2.0,文档采用 CC BY 4.0;第三方依赖和未来 RWPP 集成保留各自许可证。
协议、脚本、测试、工具和 schema。
查看全文 ↗ DOCSCC BY 4.0架构、规格、检查表和路线文档。
查看全文 ↗ THIRD PARTYAGPL / RWPP可选集成单独遵守 RWPP 许可证;游戏 assets 不随仓库分发。
阅读第三方声明 ↗