把原跑在本机 Docker 容器 fisco-gm(账本在 /tmp)的 FISCO BCOS 3.17.1 国密链整条搬进 k8s,账本落 nfs-wuguirong PVC,不再是临时环境: - 镜像只含静态 fisco-bcos 二进制;账本/配置/国密证书/节点私钥一律 经 migrate-ledger.sh 注入 PVC,不进镜像、不进 ConfigMap、不进 git。 - 幂等解包([ -f ] || tar):Pod 重建不覆盖账本,避免「假持久化」。 replicas=1 + Recreate:单节点 PBFT 不许双写、RWO 不许新旧 Pod 抢挂载。 - 常驻 fisco-verify 守卫:链活性 + 高度>=30 + block30 哈希指纹; 三条负向样例(基线抬高/指纹篡改/地址不存在)逐条破坏验证过,非恒绿。 - 管理配套 ConfigMap 从仓库原文件生成,不复制判据逻辑; hostd 只沉淀管理台账 ConfigMap(执行面受 TEE 设备与编排铁律约束留真机)。 实证:blockNumber 30→34,block 1/2/3/10/20/29/30 哈希逐个与迁移前一致, 三节点 NodePort 30100 全通,真链 22 项判据复跑 22/22;删 Pod 重建(UID 已变) 后高度仍 34、block30 哈希不变。配套更新链配置与真相文档指向 k8s 端点。
99 lines
4.0 KiB
YAML
99 lines
4.0 KiB
YAML
# 管理面常驻组件:
|
||
# ① fisco-verify —— 链活性 + 账本不回退守卫(每 60s,失败非零退出)
|
||
# ② mpc-hostd-registry —— hostd 管理面台账 ConfigMap(执行面仍留真机,见 README)
|
||
#
|
||
# ★ 本租户 SA 无 create secret 权限:LLM 凭据 Secret / 私钥一律不在这里,
|
||
# ConfigMap 只放可公开的台账与仓库原文件。
|
||
apiVersion: apps/v1
|
||
kind: Deployment
|
||
metadata:
|
||
name: fisco-verify
|
||
namespace: wuguirong
|
||
labels:
|
||
app: fisco-verify
|
||
spec:
|
||
replicas: 1
|
||
selector:
|
||
matchLabels:
|
||
app: fisco-verify
|
||
template:
|
||
metadata:
|
||
labels:
|
||
app: fisco-verify
|
||
spec:
|
||
enableServiceLinks: false
|
||
securityContext:
|
||
runAsUser: 10106
|
||
runAsGroup: 10106
|
||
fsGroup: 10106
|
||
volumes:
|
||
- name: admin-tools
|
||
configMap:
|
||
name: mpc-admin-tools
|
||
defaultMode: 0555
|
||
containers:
|
||
- name: verify
|
||
# 复用已推送的 alpine 基础镜像(含 busybox wget/tar/sh),零新增依赖
|
||
image: crpi-yscq976uwza88qap.cn-shenzhen.personal.cr.aliyuncs.com/ssw188/nginx:fisco-bcos-gm-v3.17.1
|
||
imagePullPolicy: IfNotPresent
|
||
command: ["sh", "/opt/mpc/verify-loop.sh"]
|
||
env:
|
||
- name: FISCO_RPC_HOST
|
||
value: "fisco-chain.wuguirong.svc.cluster.local"
|
||
- name: FISCO_RPC_PORT
|
||
value: "20200"
|
||
- name: FISCO_LEDGER_FLOOR
|
||
value: "30"
|
||
- name: FISCO_BLOCK30_HASH
|
||
value: "0x892af32ba1d2f74a02497b4bc5100787bd117cfcd3bc48abad78b99d90e3972d"
|
||
- name: FISCO_VERIFY_INTERVAL
|
||
value: "60"
|
||
securityContext:
|
||
runAsUser: 10106
|
||
runAsNonRoot: true
|
||
allowPrivilegeEscalation: false
|
||
volumeMounts:
|
||
- name: admin-tools
|
||
mountPath: /opt/mpc
|
||
readOnly: true
|
||
resources:
|
||
requests:
|
||
cpu: "50m"
|
||
memory: "64Mi"
|
||
limits:
|
||
cpu: "200m"
|
||
memory: "256Mi"
|
||
---
|
||
# hostd 管理面台账。执行面(qemu guest / /dev/sev / KBS)物理上必须留在 TEE 真机,
|
||
# 这里只把「有哪些真机、端点约定、凭据引用名」沉淀进集群,避免台账散在聊天记录里。
|
||
apiVersion: v1
|
||
kind: ConfigMap
|
||
metadata:
|
||
name: mpc-hostd-registry
|
||
namespace: wuguirong
|
||
labels:
|
||
app: mpc-hostd
|
||
data:
|
||
README: |
|
||
mpc-hostd 是宿主控制面(TEE 直调度),默认监听 127.0.0.1:3010。
|
||
★ 硬边界:hostd 执行面不能进 k8s —— 它要起 qemu guest、访问 /dev/sev 或 CSV
|
||
vmmcall/ioctl 设备,wuguirong 节点没有 TEE 设备;项目铁律也禁止走编排层。
|
||
本 ConfigMap 只是管理台账(真机清单 / 端点约定 / 凭据引用名),不是 hostd 本体。
|
||
★ 诚实边界:hostd 仍是明文 HTTP;共享密钥是静态的,不是站点端签发的短期 token。
|
||
跨机非回环必须「共享密钥 + --allow-remote」两者齐备。
|
||
REAL_MACHINES: |
|
||
192.168.1.102 海光 Hygon C86 (CSV) 裸机/hypervisor;官方 verify-attestation
|
||
192.168.1.7 AMD EPYC 7203 (SEV-SNP) SNP guest 虚机(Kata/QEMU),内核 6.13.0-snp-guest
|
||
CREDENTIAL_REFS: |
|
||
真机 SSH 凭据(xop 键名,值不在这里、不进集群):
|
||
tee_hg_102_user / tee_hg_102_pass
|
||
tee_amd_7_user / tee_amd_7_pass
|
||
链客户端私钥:MPC_FISCO_KEY 指向 PEM,仓库外,绝不进镜像/ConfigMap/git。
|
||
LLM 凭据:xop 键 mpc_llm_url / mpc_llm_key / mpc_llm_model → k8s Secret mpc-llm
|
||
(本租户 SA 无 create secret 权限,需管理员代建;Secret 缺失时服务退回本地模板)。
|
||
ENDPOINTS: |
|
||
hostd 127.0.0.1:3010(真机上,e2b 兼容 HTTP 面 up/ps/attest/down)
|
||
FISCO 链 RPC fisco-chain.wuguirong.svc.cluster.local:20200(集群内)
|
||
192.168.1.26|27|29:30100(集群外 NodePort)
|
||
mpc-demo 站点 192.168.1.26|27|29:30082(NodePort,已在 k8s,带 PVC)
|