网易数帆发布自主开源计划,聚焦云原生生产落地

网易杭研 2021-10-22 09:53:04

10月21日,一年一度的网易数字+大会在杭州拉开帷幕,网易数帆在会上发布了围绕云原生生产落地的自主开源计划,在这一主题下开源的KubeDiag、KubeCube、Hango(函谷)等云原生项目,以及未来的更多开源项目计划。网易数帆基础架构总监张晓龙表示,这是网易数帆践行“架构开放,内核开源,把控制权交给客户”独特理念的真实写照。

自主开源,聚焦云原生生产落地

在数字化席卷全国的浪潮下,开源基础软件已经渗透到各行各业,其中又以Kubernetes、Istio、Spark等表现尤为突出。以网易为例,在其覆盖零售、音乐、教育、传媒、游戏的多元化业务之下,运行着100多个Kubernetes集群,每天有超过100亿次的服务网格调用量,超过15万的Spark任务。

作为基础软件提供者的网易数帆,在长期规模化实践中也积累了大量的经验。张晓龙表示,社区云原生开源组件功能强大,只是由于其复杂性,在企业生产落地过程中,尤其是大规模应用场景下,还存在诸多亟需克服的挑战。因此,网易数帆选择以解决云原生生产落地问题作为当前自主开源主题,围绕Kubernetes、Istio和Envoy生态,解决易用性、可用率保障、性能优化和成本优化等四个方面的问题

在这一主题下,网易数帆开源了云原生运维诊断系统KubeDiag多租户可视化Kubernetes管理平台KubeCube高性能云原生API网关Hango(函谷),分别致力于解决Kubernetes可用率保障、Kubernetes易用性和API网关性能和易用性等问题。这些项目也是网易数帆支撑集团互联网业务和服务外部客户沉淀下来的成果,经过了大规模业务实践的验证,同时也注重对鲲鹏等国产硬件平台的适配,能够让国内企业和开箱即用且自主可控的云原生基础软件的距离又靠近了一步。

此外,张晓龙透露,在未来几个月中,网易数帆还将开源日志服务项目Loggie,基于Kubernetes的在/离线混部项目Zeus,以及服务网格性能加速项目MeshTurbo等,继续为夯实云原生基础软件做贡献。在网易数帆的这些自主开源项目中,贡献给CNCF的计划也已经排上日程。

网易数帆的开源计划获得了CNCF积极的反馈。Linux基金会亚太区策略规划总监、CNCF中国区总监Keith Chan对表示,网易作为CNCF会员,在云原生技术应用、标准推广及社区生态完善方面都做出了长期的努力,凭借这些积累,以及对业务痛点的把握,网易数帆此次发布的云原生开源主题和新项目,将能够对云原生技术与行业场景的深度融合产生巨大的价值。

KubeDiag:开创运维经验即代码时代

云原生运维诊断系统KubeDiag(https://github.com/kubediag/kubediag)是本次发布的一个特色项目。在传统工作模式下,云原生场景下故障/问题诊断依赖经验手工处理,解决效率低下且无法较好沉淀形成诊断能力,为此设计的KubeDiag,则通过提供交互式排障工具,以及诊断恢复流程的代码化记录,很好地解决了这一问题。

张晓龙介绍了KubeDiag的三大核心优势。其一是经验即代码,诊断经验100%通过代码实现,易沉淀复用。其二是自动化,以流水线方式高效编排诊断过程,可一键点击/自动触发运行。其三是良好的可移植性,以Kubernetes Operator实现,可以在任意Kubernetes环境无差别地运行。

张晓龙透露,在网易,KubeDiag已经实现全部Kubernetes集群接入,带来的直接结果是运维诊断效率提升300%,人力成本降低80%。更重要的是,系统已形成了近100个故障/问题场景的自动化诊断处理能力沉淀。正是这些能力沉淀,可以让不同行业不同场景下Kubernetes可用率保障的提升变得简单。

坚持内核开源,把控制权交给客户

“架构开放,内核开源”是网易数帆及其背后的网易杭州研究院一贯坚持的技术理念,张晓龙表示,这一理念出发点是拥抱社区加速创新,让基础软件平台演进更有生命力,而在为外部客户提供服务之后,网易数帆发现这还有一层好处,就是把控制权交给客户,让客户获得真正没有厂商锁定的技术底座。

践行这一理念,在使用开源技术的同时,网易数帆也注重回馈社区,在Kubernetes、Istio、Envoy、Spark等项目实现累计500多次提交,涉及100多项重要能力,如Envoy 的 tracing能力增强、 Lua script的支持等,期间团队也产生了Apache Spark Committer、Harbor Maintainer等重要贡献者,这代表了社区同道的高度认可。

在此之前,网易数帆还主导开源了大数据项目Apache Kyuubi (Incubating)、分布式存储项目Curve和服务网格项目Slime。其中Apache Kyuubi (Incubating)已经在2021年6月进入Apache软件基金会孵化,并形成了更加良好的社区氛围。目前,网易数帆自主开源技术已经中国华融、深圳证券交易所、华为、小米、知乎、爱奇艺、T3出行、B站和丰巢等企业落地应用。

2021年,开源被列入我国“十四五”规划,同时核心技术自主可控的需求也更加强劲,网易数帆以独特的理念在开源领域发力,预示着企业和开发者在数字化转型升级的工作中将能获得更为强力的支持。

当然,开源项目能否成功,社区极为关键,网易数帆也渴望志同道合的伙伴参与到社区建设之中。读者可以通过网易数帆开源频道(https://sf.163.com/opensource)访问项目文档、源码,加入社区。

...全文
1510 回复 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
HDC 2024华为开发者大会(脱敏)PPT汇总,共123份。 【HarmonyOS学生公开课】鸿蒙生态开发者解决方案关键特性-part3.pdf 【创新突破】HarmonyOS NEXT创新突破 打造生态差异化竞争力.pdf 【创新突破】HarmonyOS赋能,移动云盘笔记的体验变革.pdf 【创新突破】HarmonyOS高性能规则检测创新实践.pdf 【创新突破】一触即扫,精准还原:扫描全能王鸿蒙生态创新实践.pdf 【创新突破】懂车帝大模型智能Agent对接小艺智能体.pdf 【创新突破】无缝出行,美团骑行体验快人一步.pdf 【创新突破】身临其境,带你玩转折叠屏沉浸观影——咪咕视频沉浸观影.pdf 【创新突破】身临其境,带你玩转折叠屏沉浸观影——折叠屏优秀体验.pdf 【创新突破】软硬结合,智慧感知打造HarmonyOS第六感.pdf 【创新突破】高效省电,揭秘高德地图节能黑科技.pdf 【原生互联】HUAWEI ArkData:随口记、随时忆的高性能分布式智慧数据底座.pdf 【原生互联】分布式软总线 秒连接、多并发、高可靠、低功耗新体验.pdf 【原生互联】打造HarmonyOS全场景基因 让数据与内容自由流转起来.pdf 【原生互联】携手HarmonyOS,构建高效协同办公新体验.pdf 【原生互联】案例分享:小红书多端协同内容编创体验创新.pdf 【原生互联】案例分享:讯飞听见APP数据迁移经验分享.pdf 【原生互联】案例分享:起点读书全场景自由流转带来阅读新体验.pdf 【原生互联】端云协同助力快速换机,用户数据资产快速继承.pdf 【原生互联】自由互通:跨设备能力调用,助力应用创新多端体验.pdf 【原生互联】自由分享:剪贴、拖拽、近远场互传,应用间内容高效交换.pdf 【原生互联】自由流转:开发、分发、接续全栈能力,使能应用全场景无缝流转.pdf 【原生安全】HarmonyOS NEX评估保障级EAL5+认证分享.pdf 【原生安全】体系化构筑HarmonyOS NEXT安全底座支撑打造安全的数字基础设施.pdf 【原生安全】基于HarmonyOS NEXT的终端安全全链路防护.pdf 【原生安全】屹通中间件 基于HarmonyOS NEXT助力银行业APP安全.pdf 【原生安全】新HarmonyOS NEXT体系下小红书端安全防护实践.pdf 【原生安全】新架构与新生态下HarmonyOS NEXT安全隐私构筑与创新.pdf 【原生安全】泰尔带你解读HarmonyOS下安全隐私合规应用标准-APP用户权益保护的发展趋势及展望.pdf 【原生安全】石墨文档基于HarmonyOS NEXT DLP能力构建文档分享保护能力-基于HarmonyOS数据保护DLP助力石墨文档安全分享.pdf 【原生安全】鸿蒙生态全生命周期安全与隐私治理框架.pdf 【原生易用】HarmonyOS原生无障碍能力 使能更多“数字包容”创新应用开发.pdf 【原生易用】HarmonyOS原生输入法框架 助力讯飞打造安全、高效的输入体验.pdf 【原生易用】一步即扫,直达应用所有服务.pdf 【原生易用】基于HarmonyOS SDK构建简单易用的鸿蒙原生应用.pdf 【原生易用】微博打造“有声有色”生动笔记编创新体验.pdf 【原生易用】日程管理多源归一,服务场景一键直达.pdf 【原生易用】构建更便捷的华为账号使用体验.pdf 【原生易用】系统级播控框架,音视频“播、控、投”更易用.pdf 【原生易用】美团如何高效实现简单易用的用户体验旅程.pdf 【原生智能】HarmonyOS原生智能:构建未来智慧生态.pdf 【原生智能】HiAI开放端侧自定义计算编程:Ascend C.pdf 【原生智能】实践分享:HiAI助力应用低成本音质更清晰-网易云音乐.pdf 【原生智能】实践分享:做懂你的金融助手-建设银行.pdf 【原生智能】实践分享:小艺有声体验升级-喜马拉雅.pdf 【原生智能】实践分享:尽享智慧旅行服务-去哪儿旅行.pdf 【原生智能】实践分享:应用低成本生而智能-新浪新闻.pdf 【原生智能】小艺搜索 AI赋能,搜索新范式,共赢流量新机遇.pdf 【原生智能】智慧助手体验全新升级 开启生态接入新时代.pdf 【原生流畅】ArkTS协同方舟编译运行时使能鸿蒙应用原生流畅.pdf 【原生流畅】HarmonyOS原生流畅新技术概览.pdf 【原生流畅】HarmonyOS并行化技术助力应用体验更流畅.pdf 【原生流畅】HarmonyOS并行化编程框架 打造美图秀秀极致架构和体验.pdf 【原生流畅】HarmonyOS方舟图形引擎打造流畅、沉浸渲染效果.pdf 【原生流畅】HarmonyOS方舟多媒体引擎打造媒体丝滑视听体验.pdf 【原生流畅】HarmonyOS高性能网络协议栈带来流畅图文资源加载新体验.pdf 【原生流畅】如何开发高性能UI界面.pdf 【原生流畅】晶核性能优化实践.pdf 【原生流畅】智能网络感知 打造极致流畅的HarmonyOS版移动云盘图文体验.pdf 【原生流畅】毕昇编译器软硬芯云协同优化助力鸿蒙应用原生流畅.pdf 【原生流畅】淘宝HarmonyOS版本性能优化之路.pdf 【原生流畅】美团鸿蒙原生应用高效能动态化容器方案实践.pdf 【原生流畅】飞常准UI组件高性能优化实例分享.pdf 【原生流畅】高德地图HarmonyOS版本渲染优化实践.pdf 【原生流畅】高性能ArkWeb原生开发实践.pdf 【原生精致】HarmonyOS一站式多端体验设计-蜻蜓FM一多适配实践.pdf 【原生精致】万物归?,全新HarmonyOS系统架构.pdf 【原生精致】临境视听:打造双Vivid极致影音体验.pdf 【原生精致】天生精致,HarmonyOS一站式多端体验设计-易车.pdf 【原生精致】如何打造HarmonyOS精致应用体验.pdf 【原生精致】小红书鸿蒙原生应用相机实践.pdf 【原生精致】打造无缝协作的原生应用设计数字化体验 - Pixso.pdf 【原生精致】方天视窗 带你感受不?样的?端动效体验 - 华为欧拉部菲尔兹Lab.pdf 【原生精致】触手可得,打造鸿蒙极致触感体验.pdf 【原生精致】让你的相机“焕然一新” -华为终端BG HarmonyOS相机架构专家.pdf 【开发套件】HarmonyOS SDK 助力鸿蒙原生应用高效开发,好用易用.pdf 【开发套件】HarmonyOS赋能套件助力高效开发.pdf 【开发套件】“稳”操胜券 快手调试经验谈.pdf 【开发套件】仓颉语言助力鸿蒙原生应用高效开发.pdf 【开发套件】去哪儿HarmonyOS NEXT落地实践-模拟器带你尝鲜鸿蒙特性.pdf 【开发套件】支付宝 X HarmonyOS大型应用架构设计实践.pdf 【开发套件】新浪微博性能优化之道 打造流畅滑动体验.pdf 【开发套件】造利器固质量,HarmonyOS应用测试最佳实践.pdf 【开发套件】高效跨语言开发 助力WPS接入HarmonyOS NEXT.pdf 【开发套件】鸿蒙原生应用高效开发与实践分享.pdf 【星闪】HarmonyOS+NEXT来了,怎么抓住星闪的闪光点.pdf 【星闪】HarmonyOS星闪北向开放能力预发布.pdf 【星闪】拥抱开发者助力星生态.pdf 【星闪】星闪+ICCE加速无感数字车钥匙应用.pdf 【星闪】星闪在鸿蒙分布式软总线的应用展望.pdf 【星闪】星闪模组,全面引领智慧物联新浪潮.pdf 【星闪】星闪给麦克风带来的全新体验.pdf 【智慧出行】议题1:抓住HarmonyOS新机遇,重塑智慧出行产业.pdf 【智慧出行】议题2:智能座舱语音分级与测评创新进展及生态构建.pdf 【智慧出行】议题3:AI时代的智能座舱音乐体验.pdf 【智慧出行】议题4:喜马拉雅在智能座舱空间音频的探索与应用.pdf 【智慧出行】议题5:融合与创新,引领智能座舱中的视频娱乐新纪元.pdf 【智慧出行】议题6:打造儿童的全场景鸿蒙智行生活体验.pdf 【智慧出行】议题7:HarmonyOS智慧出行应用生态策略.pdf 【智慧出行】议题8:HUAWEI+HiCar+手机座舱生态融合.pdf 【统一生态】ArkUI-X跨平台框架分享.pdf 【统一生态】OpenHarmony在视觉领域的实践分享.pdf 【统一生态】“星闪+OpenHarmony”构建万物智联新引擎.pdf 【统一生态】海思5+2解决方案 助力OpenHarmony生态发展.pdf 【统一生态】统一应用平台实践分享 - 宝宝巴士世界.pdf 【统一生态】统一生态 鸿蒙生态设备统一互联底座和统一应用平台.pdf 【统一生态】设备互联互通行业案例 - 医疗行业场景分享.pdf 【统一生态】设备互联互通行业案例 - 金融行业外设接入场景分享.pdf 【统一生态】设备互联互通行业案例-政企办公行业场景分享.pdf 【鸿蒙生态伙伴SDK】Flutter在HarmonyOS中的开发实践.pdf 【鸿蒙生态伙伴SDK】uni-app助力开发者快速构建高性能鸿蒙原生应用.pdf 【鸿蒙生态伙伴SDK】Weex跨平台开发策略助力航班管家高效开发鸿蒙原生应用.pdf 【鸿蒙生态伙伴SDK】共创共赢,鸿蒙生态伙伴SDK大展“鸿”图.pdf 【鸿蒙生态伙伴SDK】凡泰极客FinClip SDK 加速轻量级鸿蒙原生应用开发.pdf 【鸿蒙生态伙伴SDK】多框架并存-58同城高性能体验升级.pdf 【鸿蒙生态伙伴SDK】携手鸿蒙生态伙伴,共建繁荣生态之路.pdf 【鸿蒙生态伙伴SDK】生态市场携手服务商伙伴 联合创新共谋商业成功.pdf 【鸿蒙生态伙伴SDK】生态管理模式安全可控 构建鸿蒙生态伙伴SDK安全新秩序.pdf 【鸿蒙生态伙伴SDK】科蓝SDK在金融领域鸿蒙原生应用开发中的实践.pdf 【鸿蒙生态伙伴SDK】聚焦OpenHarmony三方库重点垂域 持续丰富三方开源多元体验.pdf 【鸿蒙生态伙伴SDK】蚂蚁mPaaS,为鸿蒙原生应用高效开发注入创新动力.pdf 【鸿蒙生态伙伴SDK】阿里云MediaBox音视频SDK开发实践经验分享.pdf 【鸿蒙生态伙伴SDK】鸿蒙生态伙伴SDK市场上线仪式.pdf

332

社区成员

发帖
与我相关
我的任务
社区描述
专注数字化转型基础软件,包括云原生、低代码、大数据、AI等。已开源项目:Apache Kyuubi,Curve,Arctic,Loggie,Slime,Hango,KubeCube,KubeDiag
开源大数据云原生 企业社区
社区管理员
  • 网易杭研
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧