rong
|
00b0c5850f
|
feat(psi): 跨会话盲化缓存——重复对账的建会话从 1.3 s 降到 5 ms
PSI 的建会话时间几乎全是 EC 标量乘(两方各 2|X| 次),而重复对账场景里
两场之间的 ID 大多没变。缓存盲化结果后稳态零 EC。
- `nax_psi::cache::BlindCache`:两张表,`SHA256(salt‖ID) → k·H(ID,domain)`
与 `P → k·P`;一个未命中 = 一次标量乘,所以 `misses()` 就是 EC 次数。
- `blind_with_domain` 拆出 `blind_points` / `shuffle_perm`:缓存按元素查、
与顺序无关,洗牌只在协议层需要。
- `strict::relationship_id`:按排序后的名单派生跨会话稳定的标识。加速模式
用它替代会话标识去掺 domain —— 这是缓存的**前提**,也是**代价**。
- `run_psi_session_accelerated` + `PsiAccel`:默认入口原样转发 `None`,
不加缓存的调用方行为一字不变。
- 换密钥或换 domain 由 `bind` 比指纹强制整表作废:拿旧点算交集会恒为空
且不报错,本仓第 N 次「静默算错」,这里直接断开。
- 缓存不短路协议:命中只跳过我方标量乘,点照发、`strict` 校验照做、交集照求。
实测(真 TCP + PSK,同机两线程,三档一次运行内):1024 行
不缓存 1263 ms / 冷缓存 1298 ms / 热缓存 **5.2 ms**,热缓存 EC 次数 0;
10240 行 9260 / 11425 / **96.6 ms**。
验收 `nax-node/tests/psi_cache.rs` 5 条:结果一致、稳态零 EC、增量只付增量、
三方同样成立,外加一条**反向守卫** —— 把 domain 改回每场一换,结果仍对但
命中归零(变异验证:去掉 `bind` 的清表,只有这一条会红)。
代价写清:跨会话可关联、预计算表对该对端恢复可用。默认不开启。
|
2026-11-02 14:14:54 +08:00 |
|
rong
|
56e974c580
|
feat(ir): 协议调用序列改由编译器生成(nax-ir + nax-ml/nax-sql 迁移)
影响:交互轮数第一次能「问出来」而不是靠人数代码 —— `nax plan` 报纵向 LR 一次
迭代 17 轮,`nax sql-plan` 报掩码聚合 115 轮,都不需要数据、不联网。同时
「漏一次 truncate 差 2^fxp 倍且不报错」这类问题从靠 review 变成建图期报错。
- 新增 `nax-ir`(零新增外部依赖):`Vis` 挂在值上而非环境上;公开值进密态
表达式强制插 `Lift` 节点(只有 0 号带明文),任何一方都不会把公开值加两次
- 定点尺度 `Node.scale` 也挂在值上:乘 fxp 编码的公开系数后必须 `trunc` 回基准。
`Op::Scale`(乘积 k+1,要截断)与 `Op::ScaleInt`(裸 u64 乘,0 轮)分开
- 轮次规划按 `base = max(end(前驱))` 分阶段、同阶段 `open` 合成一次往返;
轮数 = Σcost(交互算子) − Σ(每阶段 open 个数 − 1),与执行器逐条对齐
(不能用 `max(end)`,同阶段里 scale 与 open 是串行的)
- `nax-vault::open_batch` 是地基:Beaver 的 d/e 互相独立,先全发再全收,
`mul`/`matmul_trunc` 从 2 个往返降到 1
- `nax-ml`:`VerticalLR::build_epoch` 建图一次跑 `epochs` 遍(循环体外提),
求幂刻意沿用与手写版相同的递归树,保证逐位一致
- `nax-sql::secure`:掩码 WHERE + 聚合改成两段图 —— `AVG` 的除数要执行后才知道,
所以第一段拿「掩码后列 + 命中数」,第二段拿其余聚合
一并带上上一轮的 n 方改动(此前未提交):`TrustPlan` 从纸面枚举变成计算函数
(L2 明文合并要求**每一方** attest 通过)、纵向 LR 改按列块清单 `ColBlock`
(与 `sites` 位置对齐,不是集合相等)、PSI 抗恶意三道硬化(低阶点黑名单 /
重复点检测 / 会话绑定 domain)。
验证:全量 450 用例通过(+50),`-Dwarnings` 零告警,`nax-core` no_std 守线过。
迁移对拍与手写版:帧序列逐帧相同、SQL 的 COUNT/SUM/MIN/MAX 逐位相同、AVG ≤1e-4、
轮数不增。变异验证 7 条全部按预期失败 —— 其中把 `CMP_ROUNDS` 9 改成 8 时,
计划轮数与实测突发数两条互相独立的测试同时变红。
未做:不做协议选择(`mul` 永远 Beaver)、不做恶意安全、跨算子类别不共享尾部轮,
因此报出的轮数是**上界**;`nax-psi::strict` 只是硬化,不是 OPRF-PSI。
|
2026-11-01 19:01:16 +08:00 |
|
rong
|
37aa81e394
|
feat(psi): n 方隐私求交(环协议)+ 分块流水修复大集合死锁
影响:PSI 此前硬卡在两方,导致纵向 LR / SQL JOIN 无法扩展。现在 3 方及以上
可以直接跑,n=2 退化为原两轮交换、开销逐项不变(没有第二条代码路径)。
- nax-psi 新增 match_across:n 方求交(逐个 match_points 取 AND)。不能拿两两
求交拼 —— A={1,2} B={2,3} C={3,1} 两两都非空但三方交集为空,有专门的测试钉住
- run_psi_session 改成环协议:集合沿环走 n-1 跳、每跳叠一把密钥,最后汇总广播;
新增 PsiConfig.my_idx(必须与 transport 的 party 编号一致)
- pipeline_points:分块 + 交替收发。整份 3.2 MB 单帧会写满 socket 缓冲(macOS
默认 ~128 KB)造成多方互相阻塞 —— 实测 10 万条两方 256 s 后 Broken pipe;
分块后在途数据恒定 32 KB,10 万条两方 34 s、三方 90 s
- nax-cli 的 psi 支持 --peers 建网状连接(与 node 一致);种子一律从
(主种子, site) 派生,否则各方共用默认 --seed 会撞 ECDH 私钥(交集仍对,隐私全失)
验证:三方真 TCP 跑出正确交集;变异验证两条 —— 把 AND 退化成"只比第一个对端"、
把环上"谁持有哪份集合"写错,对应测试都立刻失败。
未做:恶意方防护(需 OPRF-based PSI);纵向 LR / SQL JOIN 仍是两方(它们是
两方协议,不是被 PSI 卡住)。
|
2026-11-01 14:29:53 +08:00 |
|
rong
|
d79048e690
|
test(n-party): n>2 从"代码看着对"变成"有测试守着",列交换扩到 n 方
影响:nax 的 n 方能力此前只有 open 和整数乘有测试,截断/矩阵乘/比较一律
只跑过两方 —— 而这三处恰好都碰公开值,两方写错只是数值翻倍,三方错成三倍,
代码一模一样、不报错。另外竖向列交换原语硬卡在两方。
- nax-vault 补 4 条三方测试:truncate(cs 只落 0 号)、mul_trunc、matmul_trunc、bit_lt;
截断那条做过变异验证(把 `if my_idx == 0` 改成 `if true`,测试立刻失败)
- nax-sql 新增 exchange_split_columns_multi:n 方竖向列交换,两方版改为复用(去重收发逻辑)
- docs/N_PARTY.md:能力矩阵,每条"支持 n 方"都指到测试,每条"不支持"写明是协议限制还是没做
- nax-node 的 run_session 文档补一句 `+1` 在求和之内(结果 = Σ∏ + 元素个数),
避免把正确结果当成"公开值加多了"去改代码
未做(协议限制,非本轮):n 方 PSI。两两求交 ≠ n 方求交,需环协议(O(n) 轮)
并新增中间集合帧;落地前依赖行对齐的纵向 LR / SQL JOIN 只能两方,已在启动时拒绝。
|
2026-11-01 12:49:27 +08:00 |
|
rong
|
a00b32f2f5
|
feat(secure): 链路 AEAD 加密 + 熵源统一 + TEE seal 换成标准 ChaCha20-Poly1305
影响:跨机部署不再假设链路可被窃听(此前只有握手认证,分片与掩码差值明文传输);
TEE 密封格式从 v1 换到 v2,旧 blob 解不开但会明确失败而不是误解。
- nax-core 新增 aead / osrand:ChaCha20-Poly1305(复用 prg 的 core,RFC 8439 标准向量 + OpenSSL 交叉验证),OS 熵源拒绝时间戳降级
- nax-node 握手派生 c2s/s2c 双向会话密钥,帧走 AEAD;计数器严格对齐,重放与错向密钥均拒绝
- nax-tee 两处手拼 encrypt-then-MAC(optee/core、mock)收敛到 nax-core::aead:开销 44B→28B、版本进 AAD、删除已无用的 K_mac;重复的 HMAC/ct_eq 合并为 nax-core 单一实现
- nax-he 补 keygen_os(库函数不再 panic),确定性 keygen 保留给 golden 测试
- tools/ci.sh + .gitea/workflows/ci.yml:测试 / -Dwarnings / nax-core no_std 三条闸门
- bench_core:matmul、逐元素、AEAD、分片重建的可复现基准
设计取舍:帧加密自己实现而不引 crate —— nax-core 的依赖树必须为空才能编进 OP-TEE TA;
ChaCha20 复用 prg 里已有的 core,避免两套实现分叉。
|
2026-11-01 11:20:28 +08:00 |
|
rong
|
471289fe55
|
feat: 按 SecretFlow 对比结论补齐六条优化 + PostgreSQL 数据接入
影响
- 传输层不再"知道端口就能冒充":PSK 挑战-应答,未配置时显式告警
- 参与方参数不一致可归因(逐字段对表,不再只说"指纹不同")
- 长跑不再整表进内存:CSV 真流式,PG 可直连
- 所有子命令支持 --report json,stdout 只出结构化结果,诊断走 stderr
- 作业支持 DAG 与落盘状态,失败/跳过/重来可追溯
- 计算域抽象落地,dry_run 开关第一次有消费者
改动
- nax-core: 新增 hmac(HMAC-SHA256 / ct_eq / derive_labeled);pg 的 HMAC 改为委托,删重复实现
- nax-node: 新增 auth(REQ/ACK/OK,ctx 绑定双方序号与双 nonce,双 label 防回打)、entropy(只读 /dev/urandom,不降级)
- nax-proto: 新增 Op::Manifest,显式拼字节避开长度前缀错位
- nax-vault: exchange_manifest 比对版本/参与方/fxp/键值清单,三种差异分别点名
- nax-data: 新增 source(TableSource/Batch/CsvSource,流式与整表逐位一致);新增 pg 客户端(自研 wire、trust/md5/SCRAM、零外部依赖)
- nax-orch: 新增 plan(文本计划 + 拓扑校验)、state(append-only JSONL)、run_jobs;协议加 SKIP,单作业模式逐字不变;每作业派生种子避免 Beaver 三元组复用
- nax-runtime: 新增 device(Value/Device/Plain/Secret);域是数据属性,单方搬不回明文;非线性算子在密态域显式拒绝而不是给出错掩码
- nax-cli: 新增 report 模块(Cell/table/kv/note!)、selfcheck(含 TEE 签名)、pg(列类型摊开)、orch run|status
- tools/pg-dev: PGlite + PG-wire 壳、两方种子库、e2e.sh 20 条断言
设计(明确拒绝的方案)
- 设备抽象不做 eval(op) 分发:线性算子对加性分片天然透明,多一层间接只多一个没人用的入口;非线性算子要换协议,不是换指针
- DAG 计划用文本不用 JSON:现场手改要能报"第 2 行:不认识的指令 retries",而 serde_json 与单二进制目标冲突
- 端到端用 PGlite 而非系统 PostgreSQL:同一份源码编成 WASM,无需常驻服务
回归
- cargo test --workspace --features secure → 338 通过 / 0 失败
- cargo build --workspace --all-targets --features secure → 零代码告警
- cargo build -p nax-core --no-default-features → no_std 守线通过
- tools/pg-dev/e2e.sh 两轮真 TCP + 真 PSI + 真密态聚合,两方输出逐字段一致
|
2026-10-31 21:08:21 +08:00 |
|
rong
|
355d1be699
|
feat(ml): 纵向 LR 接 PSI 行对齐
影响:两方各持不同客户名单时,能先 PSI 求交再密态训练纵向 LR;
此前 demo 隐含「行已对齐」,真实业务走不通。
- `nax_psi::align_by_key`:从测试上提为公开函数(PSI 结果的后处理),
按共享键字节序排序;键重复即报错(一对多 join 不支持)。
- `run_lr_vertical_session`:两方各持不同客户、不同特征列的完整纵向 LR,
PSI → align → 0 分片拼接列块。列块排布在碰网络前就校验。
- 新增 `tests/lr_vertical_psi.rs`(4 测):含变异检验——去掉排序后 2 条红。
|
2026-10-30 18:32:05 +08:00 |
|
rong
|
2e82c3e630
|
feat: P1.2 n 方网状 + P5 Ray 编排 —— 3/4 方真实 TCP 跑通
P1.2(n>2 分片)
- nax-vault::Transport 从单连接升为按 party 索引的 send_to/recv_from,
send/recv 保留为两方便捷路径(PSI 与旧测试不动)
- Vault::open 改为广播:向 n-1 方各发一次自己的分片再统一收,
通信量 O(n^2);inbox 按来源 party 分桶(混在一起会把两方分片加错对象)
- send_share / 新增 recv_share_from 按 party 定向,recv_share 在 n>2 时
显式报错而非猜一个对端
- nax-node 新增 TcpMesh:n 方全网状(每对一条直连),建连规则「小编号主动
connect 大编号」,accept 方靠 4 字节 party 下标握手认人
- run_session 改链式乘 z = x0·x1·…·x(n-1),每轮 1 次 Beaver 乘 + 1 次截断
- CLI 放开两方限制,新增 --peers name=addr,...(与 --listen 搭配)
为什么必须全网状而不是星型:Shares 帧里是真实输入分片,星型让 head 转发
等于把一方输入读给中转节点看。n 是跨机构参与方个数,n(n-1)/2 条直连不是瓶颈。
P5(Ray 编排)
- deploy/ray/nax_cluster.py:两阶段提交(actor 先报本机 IP,driver 拼出
peers 表再起进程),actor 按 {site}_node 资源标签落机器
- 三种后端:--dry-run 打印计划 / --local 本机并行(不需 Ray)/ 默认连集群
- launch.sh 改为透传;README 补两阶段时序、排序为什么是协议要求
验证:三方 2·3·5+1=31、四方浮点(1.5·2·0.5·4 与 2.25·4·(-1)·0.125)
三方/四方输出一致;整数域四方 3·5·7·2+1=211 精确。
cargo test --workspace 134 全绿(vault 10 / node 5),no_std 与 armv7 交叉
编译守线通过。Ray 集群模式未在真实多机验证,已在 README 标注。
|
2026-10-30 08:54:14 +08:00 |
|
ssw
|
7b373fb0d8
|
feat: P2 纵向联邦逻辑回归(全程密文训练)
nax-core
- matmul_triple_into + Dealer::matmul_triple:矩阵 Beaver 三元组
- extern crate alloc(matmul_triple 需要动态临时缓冲)
nax-vault
- matmul_trunc:矩阵 Beaver 乘 + 定点截断
- scale_public / add_local / sub_local:本地辅助运算
nax-ml(新 crate)
- VerticalLR:SGD 密文训练(特征/标签/梯度/权重全密文)
- sigmoid_poly:奇多项式逼近,系数与参考实现 SIGMOID_FITS 逐位一致
- plaintext_lr:明文对照实现
- 4 单测含端到端密文 vs 明文相关系数 > 0.95
nax-node / nax-cli
- run_lr_session + `nax lr` 子命令,二进制 499 KB
验收
- 87 用例全绿,no_std + armv7 通过
- 两进程密文 LR:标准化数据两侧输出一致 w=[0.000008, 0, 0.659542]
|
2026-10-29 11:41:13 +08:00 |
|
ssw
|
c5b2cf69a5
|
feat: nax-rs P0/P1/P1.5 —— Rust 重写隐私计算框架
算子核(nax-core):零依赖 no_std
- Z_2^64 定点算术 + AVX2 矩阵乘,与 Python 参考实现 215 条逐位一致
- 加性分享 / Beaver 三元组 / 截断对 / edaBit,ChaCha20 PRG,SHA-256
- 自实现银行家舍入(f64::round_ties_even 是 std-only,no_std 编不过)
协议栈
- nax-proto:手写帧协议(12 字节头 + u64 payload),无 protobuf 依赖
- nax-vault:Beaver 乘 / 定点截断 / open / reveal
- nax-node:TCP 传输 + 密文会话 + PSI 会话
- nax-psi:X25519 ECDH-PSI(唯一外部依赖 dalek,因恒定时间约束)
- nax-tee:HAL trait(seal/unseal/attest/sign)+ Mock + TrustPlan 四级降级
验收
- 83 用例全绿;armv7 全 workspace 编译通过
- 两进程密文计算:(1·4+1)+(2·5+1)+(3·6+1) = 35
- 两进程 PSI:[1..5] ∩ [3..7] = {3,4,5}
- 单二进制 450 KB,零运行时依赖
文档
- docs/ARCHITECTURE.md:分层、Ray 定位、TEE 分工与降级梯度
- docs/ZYNQ.md:A9 性能预算(比 i5 慢 8-12x,非 50x)与部署形态
|
2026-10-29 11:10:54 +08:00 |
|