11月4日,2021騰訊數(shù)字生態(tài)大會Techo Day技術峰會在武漢召開,騰訊首次披露了在5大技術領域的開源新進展,并回顧了騰訊開源的四大變化。

騰訊公司副總裁王巨宏表示,云與開源共生共榮、相互支撐,共同為用戶和開發(fā)者創(chuàng)造價值,將是未來行業(yè)的大趨勢、大方向。騰訊及行業(yè)技術,未來必將以開源的方式,在云上生長和發(fā)展。

在操作系統(tǒng)領域,騰訊持續(xù)投入超過10年,與合作伙伴經(jīng)過1000多萬節(jié)點大規(guī)模場景驗證的云原生操作系統(tǒng)OpenCloudOS,即將成為開放原子開源基金會開源項目的一員;在云原生領域,騰訊云此次發(fā)布了多集群管理云原生管控平臺clusternet及云原生服務發(fā)現(xiàn)和治理中心Polaris Mesh(北極星)2個新項目;在大數(shù)據(jù)領域,騰訊將進一步走向全面開源,并積極貢獻和反哺開源社區(qū),即將開源全場景在線離線混部解決方案Caelus和計算領域熱門方向RSS(Remote Shuffle Service)的新項目Firestorm;在數(shù)據(jù)庫領域,騰訊將推出針對于大規(guī)模交易場景的企業(yè)級分布式MySQL內(nèi)核數(shù)據(jù)庫開源項目TXSQL;在安全領域,騰訊近期成為中國第一家加入OpenSSF安全開源基金會的企業(yè),將引入騰訊安全二十年的安全能力沉淀,助力簡化行業(yè)的開源安全流程,為開源項目的安全性提供保障。

此外,在11月2日剛剛成立的Linux NextArch(下一代架構)基金會中,騰訊將作為首批創(chuàng)始企業(yè)加入,并針對異構架構及多云場景的下一代微服務架構及行業(yè)應用案例,通過開源合作的方式,構建開源技術,輸出最佳技術實踐,促進行業(yè)轉型,助力技術創(chuàng)新和商業(yè)增長。

據(jù)了解,目前騰訊的開源工作主要圍繞著項目開源、社區(qū)治理、生態(tài)共建三個方向推進。項目開源上,騰訊是Github全球企業(yè)開源貢獻榜中TOP8的企業(yè),開源了超過130個項目,累計獲得了超過38萬開發(fā)者的關注和Star。這些項目絕大多數(shù)都來自于騰訊的核心業(yè)務,是在騰訊公司內(nèi)真正使用和經(jīng)過業(yè)務考驗的代碼。

社區(qū)貢獻方面,騰訊持續(xù)貢獻著超過30個主流開源社區(qū),并加入了Linux 基金會、Apache 基金會等十余個國際開源基金會,也是開放原子開源基金會最早的發(fā)起單位之一。在生態(tài)共建方面,騰訊云將兩大核心技術版塊——物聯(lián)網(wǎng)操作系統(tǒng)TencentOS Tiny和企業(yè)級容器編排引擎TKEStack捐贈給了開放原子開源基金會,并即將捐贈第三個云原生操作系統(tǒng)項目。此外,全棧機器學習平臺Angel、萬億級大數(shù)據(jù)消息中間件Apache Inlong(應龍),高性能微服務治理框架TARS, 云原生邊緣容器開源項目SuperEdge等也陸續(xù)捐贈進入國際頂級基金會孵化和畢業(yè)。2020年,騰訊的開源項目TARS進一步孵化,成立了Linux基金會旗下專注微服務領域的子基金會TARS 基金會,這也是第一家由中國公司發(fā)起成立的軟件基金會。

騰訊開源四個變化

王巨宏回顧2021,談到了騰訊開源生態(tài)正在發(fā)生的四大變化。

首先,是開源協(xié)同常態(tài)化。自2018年9月30日的“930”變革后,騰訊開始轉變推進開源的思路,并正式把開源協(xié)同作為公司級的技術戰(zhàn)略之一。三年過去,騰訊已經(jīng)組建和孵化了117個開源協(xié)同小組,涵蓋了計算、存儲、數(shù)據(jù)等所有互聯(lián)網(wǎng)基石型技術,涉及了騰訊云、微信、QQ等所有核心業(yè)務板塊。目前騰訊內(nèi)部代碼的開源率達到85%,不僅給騰訊帶來巨大的效能提升和成本節(jié)約,也通過云助力著生態(tài)伙伴。

第二個變化是開源技術核心化。騰訊大量經(jīng)過內(nèi)部業(yè)務檢驗的自研核心代碼、底層技術,正通過開源協(xié)同沉淀下來,走向對外開源。目前騰訊已經(jīng)實現(xiàn)了操作系統(tǒng)、數(shù)據(jù)庫、大數(shù)據(jù)、AI、云原生等核心技術領域上的多點開源突破。比如騰訊多年持續(xù)投入研發(fā)、具備HTAP能力的數(shù)據(jù)庫產(chǎn)品TDSQL(PG版),研發(fā)超過10年、商用節(jié)點近千萬的騰訊操作系統(tǒng)TencentOS等,一經(jīng)開源,就廣受開發(fā)者和廠商歡迎。

第三個變化是開源貢獻多元化。近幾年,騰訊云一方面通過持續(xù)創(chuàng)新,解決線上遇到的各種挑戰(zhàn)并將產(chǎn)出反饋給社區(qū);另一方面探索云計算領域的新技術,做好前沿技術的預演和積累,堅定不移地持續(xù)為開源社區(qū)做出貢獻。

在云計算的關鍵底層技術KVM領域,騰訊云是唯一連續(xù)五年進入全球企業(yè) KVM 開源貢獻榜的中國企業(yè),也是貢獻值最高的中國企業(yè)。騰訊云啟動了騰源會,幫助項目健康成長、協(xié)助開源愛好者交流、發(fā)揮開源領導者領袖價值。同時,騰訊還蟬聯(lián)了JDK15、16、17中國企業(yè)貢獻度排名第一,并連續(xù)作為作為全球Notable貢獻者被OpenJDK社區(qū)主導者Oracle點名致謝。

最后,是開源人才年輕化。良好的開源生態(tài),離不開與高校的緊密合作,從2006年開始,騰訊就圍繞著人才培養(yǎng)、聯(lián)合研究、學術交流三條主線,開展騰訊高校合作犀牛鳥計劃,為行業(yè)培養(yǎng)優(yōu)秀的互聯(lián)網(wǎng)人才。2021年,騰訊首次啟動了“犀牛鳥開源人才計劃”,繼續(xù)與高校深入合作,幫助學生由淺入深了解開源知識,用企業(yè)真實項目來反哺教學,進一步助力開源人才生態(tài)的發(fā)展。首期計劃中,一共有420所國內(nèi)外高校,超過3000位學生參與。王巨宏表示,未來騰訊希望鏈接更多行業(yè)機構一起參與發(fā)展,為開源教育貢獻更多的智慧和力量。

云與開源共生共榮

對于云和開源的關系,王巨宏表示,目前云上幾乎所有的主流技術都是開源的產(chǎn)物,可以說,云行業(yè)的快速發(fā)展,正是得益于開源技術的紅利。隨著云計算和云原生的發(fā)展,也逐漸形成了云開源生態(tài),云則為開源的發(fā)展提供了最佳的載體。

具體來看,云讓開發(fā)者能夠更方便地使用和共享開源技術。“騰訊云在持續(xù)與開源產(chǎn)品、開源架構做兼容,使用統(tǒng)一標準,方便所有廠商、開發(fā)者都能夠快速、放心的使用?！北热珧v訊云結合騰訊數(shù)據(jù)技術實踐、開源技術組織和商業(yè)化技術合作伙伴能力,在云端提供了涵蓋Hadoop、ES、MPP數(shù)倉在內(nèi)開箱即用的數(shù)據(jù)基礎設施和數(shù)據(jù)工具,豐富易用、開源開放,可以幫助企業(yè)快速構建安全、穩(wěn)定、可擴展、可高效運營的數(shù)據(jù)IT架構。騰訊云的云原生容器編排引擎TKEStack,功能組件都來源于開源社區(qū),在技術架構上符合標準 Kubernetes 接口,最新版本支持所有可用的功能和安全補丁,任何符合云原生規(guī)范標準的應用或項目都可以構建和運行。

王巨宏表示,騰訊云也致力于通過云原生開源項目,與行業(yè)共同探索開源的社會價值和商業(yè)價值。“我們希望未來不管是一個人,還是三五個人的小團隊,或者是大多數(shù)中小企業(yè),都能用上和大廠一樣的框架和技術,進而助力整個行業(yè)技術的創(chuàng)新和進步?！?/p>

比如騰訊云的云原生一體化部署工具CloudBase Framework,支持前后端應用一鍵部署,能夠極大降低部署門檻、提升部署效率。開發(fā)者不用再花時間關心服務器的配置、管理和運維,能更快體驗開源項目。騰訊云的云原生開發(fā)環(huán)境工具Nocalhost,通過對開發(fā)空間、集群、應用、開發(fā)者和項目管理員的重新整合,可以做到訓練環(huán)境的一鍵部署,助力云原生AI開發(fā),可應用在互聯(lián)網(wǎng)+、機器人、自動駕駛、無人機等眾多行業(yè)云原生應用開發(fā)領域。

Nocalhost開源組件的企業(yè)用戶杭州小影科技,通過將AI技術應用于視頻制作、傳播、存儲等場景,讓視頻編輯過程更加簡單化、智能化,在用上Nocalhost開源組件后,單次調(diào)參效率從原來的分鐘級提升到秒級,大大提高了AI視頻編輯能力的云上訓練效率。

騰訊云也在積極通過開源的方式,共建開放協(xié)作的技術標準,致力于用開源推動技術發(fā)展。比如今年10月,騰訊云聯(lián)合社區(qū)多家廠商共同發(fā)起的云原生邊緣容器開源項目SuperEdge通過捐贈評定,正式成為了CNCF云原生計算基金會的沙箱項目。這不僅意味著該項目得到了云原生開源社區(qū)的認可,同時也標志著該項目從騰訊走向了社區(qū),為建立基于容器的邊緣計算基礎設施標準,加速邊緣計算行業(yè)的發(fā)展邁出了重要一步。

多媒體領域對性能有著極強的渴求——幾乎每過十年壓縮率會提升一倍,而對計算資源的要求則增強到十倍,因此從技術和社區(qū)發(fā)展的角度,發(fā)現(xiàn)和理解好的開源項目并提供全方位的性能優(yōu)化對整個行業(yè)都是非常重要的。在當前多媒體領域的主流開源項目中,騰訊云都參與了貢獻,比如媒體庫(FFmpeg)、流媒體服務器(SRS)、編碼庫(AOM)、播放器(VLC)、傳輸協(xié)議(WebRTC、SRT)等。同時,騰訊云也參與了音視頻領域的多個開放標準組織,其中在Alliance for Open Media中,騰訊是國內(nèi)唯一一家Founding Member,將來還會參與到下一代開放編碼標準AV2的制定中。

王巨宏表示,開源工作是一項長跑,可能會在長時間內(nèi)都是默默無聞和孤獨的,因此要有足夠的信念和理想驅動才有可能堅持下來,對個人、對企業(yè)來說都是如此。騰訊也希望通過構建一個開放的社區(qū)鏈接、幫助更多的開發(fā)者、企業(yè)加速其開源創(chuàng)新,一起擁抱開源、開放協(xié)作。其中,騰源會就是這一規(guī)劃的重要象征和起點。目前,騰源會已聚集超過30位的開源領袖,并與十多個開源社區(qū)和國際國內(nèi)頂尖開源基金會形成聯(lián)結,充分發(fā)揮開源社區(qū)的“源力”,與廣大開發(fā)者一起創(chuàng)造正向價值,用技術創(chuàng)造更美好的未來。