# Ray 部署编排(不进计算路径) Ray 在这里只做一件事:**把 `nax node` 拉起,并保证每一方落在它自己的机器上**。 计算不走 Ray —— 不走 object store、不走 cloudpickle、不走 actor 调用。 节点之间用 nax 自己的帧通信(全网状 TCP 直连,每对参与方一条)。 ## 为什么这样切 Ray 唯一不可替代的能力是**自定义资源调度**: ```bash # alice 的机器 ray start --address=
:6379 --num-cpus=1 --resources='{"alice_node": 1}' # bob 的机器 ray start --address=:6379 --num-cpus=1 --resources='{"bob_node": 1}' ``` `{"alice_node": 1}` 这种资源标签让 Ray 能保证"跑 alice 的进程只在 alice 的机器上", 这一点自己写调度要花不少功夫。driver 提交 actor 时声明同名的 `resources={"alice_node": 1.0}`,"数据不出域"就从配置文件里的口头约定 变成调度层的硬约束。 但如果让 Ray 承载**计算**,就会引入四个二进制化的硬伤(见 `docs/ARCHITECTURE.md#2-为什么不是每方一个-ray-actor`):函数要 cloudpickle 序列化、对象所有权在 object store、GCS/raylet 一整套进程、异常跨语言传播。 所以:**Ray 管进程,不管数据**。 ## 两阶段提交 先占位拿 IP,再带 peers 起进程。一轮做不完的原因是:先启动的方 不知道自己该连谁 —— 地址表要等所有方都报完才知道。 ```text 阶段 1 NodeSlot.options(resources={"alice_node": 1}).remote("alice") actor.where() -> "10.0.1.7" 各机器真实 IP 阶段 2 peers = "alice=10.0.1.7:9440,bob=10.0.1.8:9441,carol=10.0.1.9:9442" actor.run(["nax","node","--site","alice","--peers",peers, ...]) ``` ## 用法 ```bash # 1. 在各机构机器上起 Ray 节点(带自定义资源标签) bash deploy/ray/start-node.sh alice