百度智能云容器产品布局和创新应用.pptx

百度智能云容器产品布局和创新应用器技术在百度内部发展历程百度智能云容器的商业化实践容器化创新应用和解决方案附录目录

Since2012自研百度的Borg几十万机器单集群上万千万级别容器资源利用率资源交付效率混布和混部内部所有业务托管智能云前记-百度Matrix容器操作系统

萌芽阶段CRM、报表百AI计算、云原生应用万、十万2012年2015年变更自动化持续迭代、交付资源利用率、成本混合云、多云、灵活性2018年（现在所处阶段）脚本统计、脚本监控、工具化机器级管理、conf、bin制品库分离cp、mv、restartuid、进程ulimit对接内部专业平台服务网关包管理系统、版本管理系统应用框架CgroupWarden（CF）专业平台原生支持容器开发框架考虑容器环境支持镜像中心、多地域、分发优化镜像规范、独立部署器Matrix-Container、DockerQOSCNCF生态产品化、互操作性K8S部署模型自定义CRD安全容器、KVM强租户主要业务规模中间件部署发布资源隔离发展阶段在线广告系统几千检索后端流行阶段资源云化新计算阶段内部私有云PaaS演化过程

一次部署，多次修改热升级计算和存储绑定字典索引全局有状态上下游耦合蓝绿发布以空间换效率无状态、弱端口业务利旧（历史习惯、庞大规模、稳定性和效率）新的准则（互操作性、不可变基础设施、可编程性）资源插件化旧世界和新世界-冲突

部署基于镜像的增量发布容器生命周期接管数据配送高性能主机网络多端口管理PortAMRouter包管理精细化版本管理镜像传输优化异步编译和合并依赖模块组织关系多模块单独管理，合并部署配置模板化旧世界和新世界-折衷

eth09kube-proxydocker0/24containereth0containereth0808080806000160008iptablesKUBE-POSTROUTINGall--anywhereanywhereDNATtcp--anywhereanywheretcpdpt:56292to:1:8080BNSetcdNATNAT单机解决方案全机房方案内网入口不变实现A区多机房流量调度核心问题网络拓扑：K8S为容器网络有多层虚拟IP，依赖复杂Iptables（稳定性）三层路由必须依赖overlay网络（高版本内核依赖）Underlay扁平网络，容器上万，IP地址管理（地址耗尽）服务暴露：流量入口不易迁移还有对内部服务调用解决方案容器寻址：降维:放弃容器网络，牺牲容器点对点通信端口换IP:开放宿主机预留高端口区域，NAT容器出口全局集中管理全网NAT信息服务接入：打通统一NamingService，以NAT信息注册服务旧世界和新世界-折衷-网络接入

核心问题设计理念和需求冲突petscattle,提倡cattle内部上云场景需要pets业界没有方案且需求复杂增量更新原地重启不破坏原生功能解决方案富容器定位，当轻量级“虚机”进程树模型自定义init，保容器活常驻service进程，保业务活接管所有外部指令富容器进程树设计实现旧世界和新世界-折衷-热部署

20172008201520092010AWSElastic-Beanstalk2012-2014BAE（基础版下线）JAE（下线）腾讯CEE（下线）ACE（下线）搜狐云景（下线）IBMBlueMixPivotalWebServices201620192018SAEGAEGoogleGKEAzureACS华为 CCE阿里云AKS腾讯云TKE百度云CCEAzureAKSAWSFargateGoogleAnthos公有云CaaS、企业PaaS公有云PaaS、应用托管 Containerized Serverless、多云VendorLock互操作性定位和受众可运维性安全性公有云泛容器类产品发展路径（历史）

ECSEKSFargateAWSPLATFORMSERVICEAWSInfrastructureSERVICEMiddlewarePivotalPASPKSMulti-CloudInfraPFSSERVICEBROKERACKECIEDASAliyunInfrastructureSERVICEMiddlewareFunctionRKEWorkloadMgrHybird/Multi-CloudInfraUnifiedClusterMgrRancherCCEBCICNAPBaiduCloudInfrastructureSERVICEMiddlewareCFCAWS Aliyun BaiduC