Commit Graph
8 Commits
Author SHA1 Message Date
rong d60fcf40ca fix(docs): Ray 在 armv7 上确实能跑——更正错误结论并附实测
用户指出社区编过 ray 1.0.1 armv7l wheel。核实为真,之前的"不可能"是错的。

PyPI 侧仍是事实:135 个版本 5087 个 wheel,armv7l/armhf/armv6 共 0 个,
piwheels 全 skip(binary only),无 sdist。但社区有人编:
- PidgeyBE 1.0.1 (cp36)、PeterPirog 1.2.0 (cp38),issue #12128
- 唯一需要的改动是 setup.py 加 --linkopt=-latomic(8 字节原子要 libatomic)

实物核对(ray-1.0.1-cp36-cp36m-linux_armv7l.whl,19MB→64MB):
_raylet.so 16.4MB / raylet 13.1MB / gcs_server 10.9MB,
全部 ELF32 ARM EABI5 hard-float;_raylet.so 导出 2040 个 ray:: 符号,
CoreWorkerProcess::Initialize/GetCoreWorker/RunTaskExecutionLoop 齐全,
无 B5cxx11(同样是旧 ABI),所以 shim 那套做法在 armv7 也成立。

实测跑通完整节点(x86_64 沙箱 + qemu-arm-static 真 ELF32 执行):
redis(带 ray 模块) → gcs_server:6392 → plasma → raylet:6393,
NodeManager ID ebb89cb9…,GCS 回 IsAlive = 1。

顺带记三个非 32 位坑:redis 要手工播种 5 个键;容器 /dev/shm 64MB 要改
plasma 目录;raylet 硬性要求一个 worker_command。

代价也说清:1.0.1 是 2020-12 代码,GCS 协议与 2.x 不同,接不进现代集群;
cp36 要 python3.6;44.6MB 二进制。默认仍走 nax-orch。

新增 docs/RAY_ARMV7.md + ray/armv7/{run_node,run_gcs_only}.sh;
RAY_CORE.md §5 与状态表改正。
2026-10-30 12:07:19 +08:00
rong 4bb573d98c feat: Ray C++ 内核接进 nax Rust + armv7 真交叉编译
Ray 这条线不绕 bazel:
- wheel 里的 ray/_raylet.so 就是编好的 C++ core(34113 个导出符号,
  3638 个 ray:: 符号 default 可见,含 CoreWorkerProcess::Initialize)
- ray/nax_ray_shim.cc:259 行 C ABI shim,复用 process_helper 的初始化路径
- 实测跑通:Rust 二进制作为 driver 接入真实 GCS+raylet,
  拿到 raylet 分配的 node_id(d190801c…),probe 通过

踩坑(都已固化进 ray/build.sh):
- raylet 只编了 Python worker pool → 注册时语言声明 PYTHON
- Ray C++ 是旧 ABI → -D_GLIBCXX_USE_CXX11_ABI=0
- fmt v9/v11 撞车 → FMT_HEADER_ONLY
- Debian absl 固定自家 optional → 影子头直通 std::optional
- _raylet.so 是 CPython 扩展(253 个 Py 符号)→ build.rs 自动链 libpython
- GcsNodeInfo 手写 wire format 解析,避免 protobuf 跨 ABI

armv7 交叉编译修正(原结论有误):
- 换 armv7-unknown-linux-musleabihf + rust-lld/link-self-contained
- 不再需要外部交叉 gcc,macOS 本机 83 秒出 687 KB 静态二进制
- .cargo/config.toml 固化,无需 export 任何变量

其他:nax-orch 告警清理;README/ZYNQ 文档对齐实测。
2026-10-30 11:31:02 +08:00
rong 2e82c3e630 feat: P1.2 n 方网状 + P5 Ray 编排 —— 3/4 方真实 TCP 跑通
P1.2(n>2 分片)
- nax-vault::Transport 从单连接升为按 party 索引的 send_to/recv_from,
  send/recv 保留为两方便捷路径(PSI 与旧测试不动)
- Vault::open 改为广播:向 n-1 方各发一次自己的分片再统一收,
  通信量 O(n^2);inbox 按来源 party 分桶(混在一起会把两方分片加错对象)
- send_share / 新增 recv_share_from 按 party 定向,recv_share 在 n>2 时
  显式报错而非猜一个对端
- nax-node 新增 TcpMesh:n 方全网状(每对一条直连),建连规则「小编号主动
  connect 大编号」,accept 方靠 4 字节 party 下标握手认人
- run_session 改链式乘 z = x0·x1·…·x(n-1),每轮 1 次 Beaver 乘 + 1 次截断
- CLI 放开两方限制,新增 --peers name=addr,...(与 --listen 搭配)

为什么必须全网状而不是星型:Shares 帧里是真实输入分片,星型让 head 转发
等于把一方输入读给中转节点看。n 是跨机构参与方个数,n(n-1)/2 条直连不是瓶颈。

P5(Ray 编排)
- deploy/ray/nax_cluster.py:两阶段提交(actor 先报本机 IP,driver 拼出
  peers 表再起进程),actor 按 {site}_node 资源标签落机器
- 三种后端:--dry-run 打印计划 / --local 本机并行(不需 Ray)/ 默认连集群
- launch.sh 改为透传;README 补两阶段时序、排序为什么是协议要求

验证:三方 2·3·5+1=31、四方浮点(1.5·2·0.5·4 与 2.25·4·(-1)·0.125)
三方/四方输出一致;整数域四方 3·5·7·2+1=211 精确。
cargo test --workspace 134 全绿(vault 10 / node 5),no_std 与 armv7 交叉
编译守线通过。Ray 集群模式未在真实多机验证,已在 README 标注。
2026-10-30 08:54:14 +08:00
rong e983a1a4ab fix(p3-qemu): P3 QEMU 全链验证通过(ALL OK)—— TA user_ta_header include + CA 编译修复
- TA main.rs 删手写 #[no_mangle] 弱符号,改 include! $OUT_DIR/user_ta_header.rs
  (ta_head/ta_heap/ta_props/trace_* 全套由 optee-utee-build 生成,官方示例
  aes-rs 同款;手写与生成定义冲突,漏写则链接器逐个 undefined)
- ta/ca Cargo.toml 的 package 字段显式写死 version/edition/license,不再
  workspace 继承(teaclave examples/ca 的 workspace.package 无 edition)
- ca main.rs 命令分发挪进 fn run() -> R<()>,main 只收尾(? 不能用在
  返回 () 的 main,E0277 x4)
- p3_optee_qemu.sh / run_qemu.py:USTC apt/cargo/rustup 镜像、显式
  commands.run 超时、traffic token 落盘、ghfast.top clone 回退等

判据:QEMU 正常世界 nax-tee-ca selftest 全 8 步通过(provision ->
seal/unseal -> 重开 session -> 篡改拒 -> AAD 绑定 -> sign -> attest),
sw.log 两条 ffff000f Security 拒绝为预期篡改/AAD 检测,NAX_RC=0。
宿主侧 cargo test --workspace 129 全绿。
2026-10-30 01:08:49 +08:00
rong b7263bcd26 feat: P3 OP-TEE —— nax-tee 进 TEE(core/proto/TA/CA 三层 + QEMU 脚本)
- nax-tee 转 no_std + alloc(mock 锁 std feature),Cargo.toml 显式写死
  不走 workspace 继承(拷进 teaclave-sdk examples workspace 后解析不崩)
- optee/core.rs:HKDF + AES-GCM + 设备 DNA 的 seal/unseal 逻辑(no_std)
- optee/proto.rs:CA↔TA 参数格式与错误码
- ta/ + ca/:薄壳 TA(参数搬运 + secure storage)与 TEEC 客户端
- build/:OP-TEE QEMU 构建与运行脚本(build_optee.sh / p3_optee_qemu.sh / run_qemu.py)
- CLAUDE.md:项目铁律与快速验证入口
2026-10-29 17:24:47 +08:00
rong 5d385ccd60 feat: P4 大数 Paillier + HE-OLE —— 无可信发牌方的 Beaver 物料
- nax-he(零外部依赖,no_std + alloc):手写 bigint(Montgomery CIOS
  模幂 / Knuth D 除法 / Miller-Rabin)+ Paillier + OLE + PIR + n 方三元组
- 50 条 golden 逐位对照 Python(显式 r 的密文 / 解密 / 同态链 /
  负明文 % 向下取整 / n//2 边界),13 条协议语义测试
- 三元组输出布局与 share::mul_triple_into 一致,可直接接 nax-vault
- 性能实测修正:Paillier 加密 n=1024 是 21ms→7.3ms(2.9×),
  不是早前预估的 280×;HE 真正收益是可用性 + TEE 可编入
- 修复:MontCtx::modpow 未归约底数(大底数被静默截断)、
  小指数走 1-bit 幂梯(mul_plain 360→159μs)
- 110 用例全绿,no_std + armv7 全通过
2026-10-29 12:35:24 +08:00
ssw 7b373fb0d8 feat: P2 纵向联邦逻辑回归(全程密文训练)
nax-core
- matmul_triple_into + Dealer::matmul_triple:矩阵 Beaver 三元组
- extern crate alloc(matmul_triple 需要动态临时缓冲)

nax-vault
- matmul_trunc:矩阵 Beaver 乘 + 定点截断
- scale_public / add_local / sub_local:本地辅助运算

nax-ml(新 crate)
- VerticalLR:SGD 密文训练(特征/标签/梯度/权重全密文)
- sigmoid_poly:奇多项式逼近,系数与参考实现 SIGMOID_FITS 逐位一致
- plaintext_lr:明文对照实现
- 4 单测含端到端密文 vs 明文相关系数 > 0.95

nax-node / nax-cli
- run_lr_session + `nax lr` 子命令,二进制 499 KB

验收
- 87 用例全绿,no_std + armv7 通过
- 两进程密文 LR:标准化数据两侧输出一致 w=[0.000008, 0, 0.659542]
2026-10-29 11:41:13 +08:00
ssw c5b2cf69a5 feat: nax-rs P0/P1/P1.5 —— Rust 重写隐私计算框架
算子核(nax-core):零依赖 no_std
- Z_2^64 定点算术 + AVX2 矩阵乘,与 Python 参考实现 215 条逐位一致
- 加性分享 / Beaver 三元组 / 截断对 / edaBit,ChaCha20 PRG,SHA-256
- 自实现银行家舍入(f64::round_ties_even 是 std-only,no_std 编不过)

协议栈
- nax-proto:手写帧协议(12 字节头 + u64 payload),无 protobuf 依赖
- nax-vault:Beaver 乘 / 定点截断 / open / reveal
- nax-node:TCP 传输 + 密文会话 + PSI 会话
- nax-psi:X25519 ECDH-PSI(唯一外部依赖 dalek,因恒定时间约束)
- nax-tee:HAL trait(seal/unseal/attest/sign)+ Mock + TrustPlan 四级降级

验收
- 83 用例全绿;armv7 全 workspace 编译通过
- 两进程密文计算:(1·4+1)+(2·5+1)+(3·6+1) = 35
- 两进程 PSI:[1..5] ∩ [3..7] = {3,4,5}
- 单二进制 450 KB,零运行时依赖

文档
- docs/ARCHITECTURE.md:分层、Ray 定位、TEE 分工与降级梯度
- docs/ZYNQ.md:A9 性能预算(比 i5 慢 8-12x,非 50x)与部署形态
2026-10-29 11:10:54 +08:00