騰訊云專家集結(jié)亮相 KubeCon2021,門票100張免費(fèi)送
自 2018 年以來(lái),歷年的 KubeCon + CloudNativeCon+ Open Source Summit China 匯聚了全球最活躍的開(kāi)源云原生社區(qū)、最先進(jìn)的技術(shù)代表與行業(yè)的最佳落地實(shí)踐,推動(dòng)云原生計(jì)算領(lǐng)域的知識(shí)更新和技術(shù)進(jìn)步。
由于疫情的原因,2021年的峰會(huì)將采用線上虛擬大會(huì)的形式舉辦,大會(huì)專題論壇涵蓋云基礎(chǔ)設(shè)施、人工智能與數(shù)據(jù)、CI/CD、存儲(chǔ)、定制和擴(kuò)展 Kubernetes、服務(wù)網(wǎng)格、無(wú)服務(wù)器、Linux 系統(tǒng)等 21 個(gè)云原生與開(kāi)源技術(shù)細(xì)分領(lǐng)域,將為開(kāi)發(fā)者們帶來(lái)近百場(chǎng)云原生技術(shù)干貨分享。
騰訊云一直致力于云原生領(lǐng)域的技術(shù)探索,幫助企業(yè)和開(kāi)發(fā)者快速落地云原生,積極投身云原生生態(tài)共建,助力解決企業(yè)云原生改造最后一公里問(wèn)題,還推出燎原社云原生技術(shù)實(shí)戰(zhàn)營(yíng)等服務(wù)。在 KubeCon2021,騰訊資深云原生技術(shù)專家們將給大家?guī)?lái)非常精彩的技術(shù)分享,內(nèi)容涵蓋K8s、邊緣計(jì)算、服務(wù)網(wǎng)格等云原生技術(shù)細(xì)分領(lǐng)域。
讓我們來(lái)看看騰訊的專家團(tuán)隊(duì)們給大家?guī)?lái)的議題有哪些?
議程安排
唐聰 & 王超凡
騰訊高級(jí)軟件工程師
演講主題:如何有效管理數(shù)以萬(wàn)計(jì)的 etcd 集群?
演講時(shí)間:2021年12月9日 11:20-11:55
議題簡(jiǎn)介:在管理 k8s 群集的過(guò)程中,您可能會(huì)遇到許多 etcd 管理和穩(wěn)定性問(wèn)題。例如,如何通過(guò)可視化平臺(tái)管理大量 etcd 集群?如何自動(dòng)發(fā)現(xiàn) etcd 集群的潛在危害,及時(shí)報(bào)警,甚至實(shí)現(xiàn)自愈?如何順利地將 k8s etcd 遷移到無(wú)停機(jī)時(shí)間的高性能 etcd 群集?騰訊是一家大型互聯(lián)網(wǎng)公司和云服務(wù)提供商。騰訊 Kubernetes 引擎擁有豐富的大規(guī)模 k8s 集群管理經(jīng)驗(yàn),在騰訊云上管理數(shù)萬(wàn)個(gè) k8s 集群。騰訊 Kubernetes 引擎已經(jīng)實(shí)現(xiàn)了開(kāi)源的可視化 etcd 管理平臺(tái) kstone,提供 etcd 集群注冊(cè)和管理、檢查、優(yōu)化建議、備份、遷移、數(shù)據(jù)可視化等?;?kstone 項(xiàng)目,騰訊 Kubernetes 引擎有效地管理了數(shù)萬(wàn)個(gè) etcd 集群,這大大降低了運(yùn)營(yíng)和維護(hù)成本。
陳東東 & 陳凌鵬
騰訊高級(jí)工程師
演講主題:Caelus-基于kubernetes的全場(chǎng)景在離線混部
演講時(shí)間:2021年12月9日 12:10-12:45
議題簡(jiǎn)介:很多大數(shù)據(jù)任務(wù)具有實(shí)時(shí)性要求不高、運(yùn)行時(shí)間較短、資源規(guī)格小等特點(diǎn),而在線應(yīng)用的資源使用通常具有潮汐的特點(diǎn),因此可以通過(guò)混部的方式,讓大數(shù)據(jù)任務(wù)復(fù)用在線應(yīng)用的空閑資源,擴(kuò)充可用資源,降低成本。本主題介紹了騰訊大數(shù)據(jù)團(tuán)隊(duì)研發(fā)的全場(chǎng)景在離線混部系統(tǒng)Caelus。Caelus支持容器化和非容器化等多種在線場(chǎng)景,同時(shí)兼容YARN生態(tài)和云原生大數(shù)據(jù)。系統(tǒng)內(nèi)集成了指標(biāo)收集、資源畫像、資源隔離、干擾檢測(cè)、離線驅(qū)逐等模塊,在保證服務(wù)質(zhì)量(在線和離線)的前提下,最大化提升資源利用率,尤其通過(guò)引入eBPF技術(shù),對(duì)干擾檢測(cè)做進(jìn)一步的增強(qiáng)。目前Caelus已經(jīng)在公司內(nèi)部落地廣告、存儲(chǔ)等業(yè)務(wù),同時(shí)也支持了騰訊云外部業(yè)務(wù)。陳家豪
騰訊高級(jí)軟件工程師
演講主題:利用 KServe(KFServing)加速聯(lián)邦學(xué)習(xí)的模型部署
演講時(shí)間:2021年12月9日 13:15-13:50
議題簡(jiǎn)介:聯(lián)邦學(xué)習(xí) (FL) 是近年來(lái)發(fā)展最快的機(jī)器學(xué)習(xí) (ML) 技術(shù),它解決了數(shù)據(jù)孤島問(wèn)題,同時(shí)加強(qiáng)了隱私和安全性。與傳統(tǒng)的機(jī)器學(xué)習(xí)相比,聯(lián)邦學(xué)習(xí)通常部署在不同的站點(diǎn)/邊緣,這意味著聯(lián)邦學(xué)習(xí)推理服務(wù)需要一個(gè)高效且靈活的平臺(tái),以適應(yīng)不同的框架和硬件。Kubeflow 的 KFServing 組件為本地推理提供了簡(jiǎn)單、高效、可插拔和全生命周期的解決方案,完全符合聯(lián)邦學(xué)習(xí)的需要。KubeFATE 是 Linux 基金會(huì)的一個(gè)開(kāi)源項(xiàng)目,在 Kubernetes 上提供 FL 的云原生管理,并與 Kubeflow 兼容。講座介紹了使用 KFServing 為 KubeFATE 的聯(lián)邦學(xué)習(xí)模型提供服務(wù)的實(shí)踐,包括:1.簡(jiǎn)要介紹 Kubeflow、KFServing 和推斷服務(wù)工作流程 2.聯(lián)邦學(xué)習(xí)基礎(chǔ),不同的聯(lián)邦學(xué)習(xí)算法類型和用例 3.演示如何從水平訓(xùn)練的聯(lián)邦學(xué)習(xí)模型創(chuàng)建服務(wù)。張曦耀 & 劉旭
騰訊云產(chǎn)品經(jīng)理&高級(jí)軟件工程師
演講主題:Envoy 網(wǎng)格加速?gòu)?iptables 到完全 BPF
演講時(shí)間:2021年12月9日 13:15-13:50
議題簡(jiǎn)介:eBPF sockmap 已經(jīng)成為一種為服務(wù)網(wǎng)格加速 Envoy 和容器之間本地進(jìn)程通信的理想方法。然而,這一方法依賴于 iptables 來(lái)實(shí)現(xiàn)透明的流量劫持。這已經(jīng)成為了系統(tǒng)性能的主要瓶頸。本次討論將從針對(duì)當(dāng)前解決方案、來(lái)自社區(qū)的 Cilium 以及我們?nèi)ツ暝?KubeCon China 中引入的輕量級(jí)方法開(kāi)始進(jìn)行詳細(xì)調(diào)查。我們將解釋 iptables 重定向如何影響入站和出站流量上的 sockmap 匹配結(jié)果。然后我們將展示我們的第一個(gè)類解決方案,此類方案根本不使用 iptables。此類解決方案:1. 通過(guò)掛鉤綁定調(diào)用,使用 eBPF 定向入站流量到 envoy。2. 使用 eBPF 執(zhí)行透明出站流量重定向。3. 為 Daemonset 部署和維護(hù)提供集成的控制面,并通過(guò)注釋和配置地圖進(jìn)行完全控制。楊思杰
騰訊高級(jí)工程師
演講主題:BFE:企業(yè)級(jí)七層負(fù)載均衡開(kāi)源軟件
演講時(shí)間:2021年12月10日 11:20-11:55
議題簡(jiǎn)介:這里將對(duì)CNCF沙盒項(xiàng)目BFE做一個(gè)介紹。BFE是使用Go語(yǔ)言編寫的現(xiàn)代七層負(fù)載均衡軟件。在百度內(nèi)部,BFE每天轉(zhuǎn)發(fā)超過(guò)1萬(wàn)億請(qǐng)求。在百度以外,BFE也被招商銀行、cctv.com、www.so.com等組織使用。首先將對(duì)負(fù)載均衡技術(shù)的發(fā)展趨勢(shì)做一個(gè)討論。然后將介紹BFE如何設(shè)計(jì)以如何滿足企業(yè)級(jí)應(yīng)用場(chǎng)景的需求。由于使用了Go語(yǔ)言,BFE可以提供高可靠性,并且易于增加新功能。BFE的轉(zhuǎn)發(fā)表可以支持大規(guī)模的轉(zhuǎn)發(fā)規(guī)則,同時(shí)可以支持復(fù)雜的條件表達(dá)式。BFE可用于在多個(gè)Kubernetes集群間調(diào)度流量。BFE內(nèi)置很多內(nèi)部的指標(biāo)用于反映實(shí)時(shí)的狀態(tài)。梁豪 & 王冬
騰訊邊緣計(jì)算開(kāi)發(fā)工程師&邊緣計(jì)算專家
演講主題:SuperEdge 將 Kubernetes 推廣到邊緣的技術(shù)解密
演講時(shí)間:2021年12月10日 12:10-12:45
議題簡(jiǎn)介:SuperEdge 將 Kubernetes 的中心管理能力無(wú)縫下沉到邊緣計(jì)算領(lǐng)域和分布式云管理領(lǐng)域,那么 SuperEdge 是如何實(shí)現(xiàn)的呢?原生的 Kubernetes 能力擴(kuò)展到邊緣的過(guò)程中又遇到了什么樣的問(wèn)題,SuperEdge又是如何解決的呢?邊緣 Kubernetes 又將面對(duì)哪些挑戰(zhàn)和機(jī)遇?本次分享將您揭開(kāi)神秘的面紗,帶您了解 SuperEdge 設(shè)計(jì)背后的來(lái)龍去脈。向您介紹為什么需要云邊隧道,邊緣自治是如何實(shí)現(xiàn)的,ServiceGroup 是如何管理海量邊緣站點(diǎn)的,以及邊緣節(jié)點(diǎn)宕機(jī)后是又是如何被感知到的,還有SuperEdge最佳實(shí)踐等技術(shù)干貨……歡迎傾聽(tīng)背后的秘密。李穎欣
騰訊高級(jí)工程師
演講主題:C++ 工作流:基于任務(wù)的并行計(jì)算和一部網(wǎng)絡(luò)引擎
演講時(shí)間:2021年12月10日 12:10-12:45
議題簡(jiǎn)介:Workflow于 2020 年開(kāi)源,是搜狗的C++服務(wù)器引擎,計(jì)算調(diào)度與異步通信無(wú)縫結(jié)合結(jié)合,支撐搜狗幾乎所有后端C++在線服務(wù),包括所有搜索服務(wù),云輸入法,在線廣告等,每日處理超百億請(qǐng)求。不僅包括通信、計(jì)算、文件IO、定時(shí)器、計(jì)數(shù)器等異步資源,而且創(chuàng)新性引入的任務(wù)流概念,使得開(kāi)發(fā)者得以把異步任務(wù)組裝起來(lái)實(shí)現(xiàn)復(fù)雜的業(yè)務(wù)邏輯。內(nèi)部自帶多種通用協(xié)議,跨平臺(tái)、支持多種操作系統(tǒng),自帶服務(wù)治理與負(fù)載均衡。是一個(gè)并行計(jì)算與異步通信融為一體的編程范式。https://www.github.com/sogou/workflow
謝遠(yuǎn)東
騰訊云高級(jí)工程師
演講主題:Fluid:Kubernetes 原生分布式數(shù)據(jù)集協(xié)調(diào)器和加速器
演講時(shí)間:2021年12月10日 13:15-13:50
議題簡(jiǎn)介:在公共云上使用 Kubernetes 運(yùn)行大數(shù)據(jù)和人工智能應(yīng)用成為新趨勢(shì)。然而,在 S3、谷歌云存儲(chǔ)、Hadoop 分布式文件系統(tǒng) (HDFS) 等云分解環(huán)境中訪問(wèn)數(shù)據(jù),極大地挑戰(zhàn)了訓(xùn)練性能,限制了計(jì)算的可伸縮性。車漾和謝遠(yuǎn)東將介紹 Fluid,以及它如何提高 Kubernetes 中大數(shù)據(jù)和人工智能應(yīng)用程序的性能。Fluid 是一個(gè)開(kāi)源、社區(qū)驅(qū)動(dòng)、高度協(xié)作的項(xiàng)目,由大學(xué)里的工程師和研究人員提供。它由云原生計(jì)算基金會(huì) (CNCF) 作為沙盒項(xiàng)目主辦。在本次分享中,車漾首先會(huì)介紹項(xiàng)目動(dòng)機(jī)、以及什么是 fluid;之后,遠(yuǎn)東將會(huì)介紹 fluid 體系結(jié)構(gòu)、最新功能、用戶采用情況、項(xiàng)目路線圖、以及新貢獻(xiàn)者如何參與,并展示一個(gè)關(guān)于通過(guò) Fluid 加速 AI 計(jì)算的演示。