在 Amazon EKS 上,让一个 Pod 跑进自己的虚拟机,改动只有一个字段:runtimeClassName: isolated-sandbox,或者 confidential-sandbox。AWS 把这套能力叫 Nitro Sandboxes,选中的 Kubernetes Pod、ECS 任务或 EC2 工作负载,会由 Nitro 虚拟机监控器从一台运行中的 EC2 实例里切出来,装进一台带独立客户机内核的轻量虚拟机。
该功能在所有商业区域可用,且不额外收费。AWS 把它定位给租户或代码不可信的场景,排在第一位的就是编码智能体。AWS 博客里,Carlos Santana 和 Trishi Mehta 写道:每个 Pod 都拥有自己的操作系统,与宿主机和每一个邻居完全隔离。
它是怎么跑起来的
按 EKS 文档的描述,父实例上的 containerd-shim-nitro-sandbox-v2 进程借助硬件辅助虚拟化,启动一台 Firecracker 微虚拟机作为一级客户机;虚拟机内部的代理再通过自己的 containerd 运行 Pod 的容器,两侧靠 virtio 和 vsock 通信。结果是这个沙箱与父实例、与其他任何沙箱都不共享内核,也不共享内存映射,而容器本身照原样启动。
节点怎么到位,取决于集群类型:EKS Auto Mode 下,两个 RuntimeClass 随每个集群下发,具备沙箱能力的节点按需供给;标准 EKS 下,团队得为自己的节点组或 Karpenter 构建一个启用沙箱的 AMI。
两种模式,信的是边界两侧的不同一方
isolated 模式信任父实例、不信任客户机,所以 kubectl exec、日志和进程列表照常可用。confidential 模式把父实例当作不可信,把执行约束搬进虚拟机内部:由 Pod spec 生成的 Cedar 策略锁定镜像摘要、参数、环境变量、挂载和 capabilities,exec 与 stdin 被拒绝,Nitro Secure Module 把镜像和策略度量进 PCR,KMS 密钥策略可以只向度量匹配的沙箱释放密钥。镜像层也能加密,父实例搬运的是它从未读过的密文。
这条链要成立,前提是有人校验度量值。文档写得很直白:没有 KMS 策略或外部验证方检查 PCR 值,度量会被记录但从不验证,confidential 模式的机密性保证就是不完整的。
与两种模式都独立的一个网络隔离注解,会让沙箱启动时干脆没有网络设备,DNS、NTP、IMDS 和 Pod Identity 随之消失,HTTP 和 TCP 探针也会失效。
被点出的边界
AWS Container Hero Sandip Das 读文档读出了 isolated 模式留给运维的东西:防护只朝一个方向生效,被攻陷的父实例仍能观察或篡改未加密的流量和 DNS,能改写 Pod 的 /etc/hosts,还能为节点上任意 Pod 签发 Pod Identity 凭证。他还列了博客没提的前置条件,包括 Kubernetes 1.36 或更高版本、托管节点组上启用 Nitro Enclaves 的启动模板——缺了它,沙箱 Pod 会停在 Pending——以及用 Pod Identity 而非 IRSA 提供凭证。对 AWS 所说的接近原生性能,他建议当作厂商声明看待,实测启动延迟、I/O 吞吐和尾延迟。
除智能体之外,AWS 列出的场景还有多租户 SaaS、受监管工作负载、CI 构建和远程 IDE,并指向开源项目 agent-sandbox,用预热池在大约两秒内交付一台预启动的虚拟机。
限制写在注意事项页上
最大的一条是 GPU 与设备直通,首发不支持,因为 Firecracker 无法把宿主机设备传进客户机,GPU Pod 只能不带沙箱类运行。密度有两道上限:沙箱 vCPU 总数不得超过节点 vCPU 数的五倍,沙箱数量同样不得超过这个数,在 CPU 超售机型上再减半——4 vCPU 节点能放二十个 1 vCPU 沙箱,或五个 4 vCPU 沙箱。同时多线程的代价比算术更大:核心调度阻止两个沙箱共用同一核心的兄弟线程,大约只剩标称 vCPU 的一半可用;每核单线程的 Graviton 不受影响。
最近的对照是 GKE Sandbox,它从 2019 年起提供 gVisor 的 RuntimeClass,后来又加了基于 Kata Containers 和 Cloud Hypervisor 的 microvm 类。gVisor 在用户态内核里拦截系统调用,启动不到 200 毫秒,并在部分 GPU 上支持 CUDA;谷歌的微虚拟机方案每 Pod 固定 250 mCPU 和 130 MiB,启动一到两秒,不支持 GPU。AWS 选了这场分叉里的虚拟机一侧,把开销表达成密度和线程,而不是每 Pod 资源。
在 EC2 上,Amazon Linux 和 Firecracker 原生支持,其他虚拟机监控器有补丁可用。EC2 用户指南列出了支持的实例类型,并注明快照、恢复和热迁移不可用。
热门跟贴