當(dāng)前位置: 主頁(yè) > 科技 >

        百度開源2020:二十個(gè)技術(shù)領(lǐng)域持續(xù)開源 飛槳、阿波羅成行業(yè)領(lǐng)先者

        時(shí)間:2021-01-05來(lái)源:互聯(lián)網(wǎng) 作者:編輯 點(diǎn)擊:
        導(dǎo)讀 “從 2009年大規(guī)模定制 Hadoop到 2013年第一個(gè)前端可視化產(chǎn)品 ECharts率先開源,再到2016年和2017年分別正式對(duì)外開源飛槳PaddlePaddle、Apollo兩大平臺(tái), 截止目前,百度已在Github主導(dǎo)的1

        image.png

        導(dǎo)讀

        “從 2009年大規(guī)模定制 Hadoop到 2013年第一個(gè)前端可視化產(chǎn)品 ECharts率先開源,再到2016年和2017年分別正式對(duì)外開源飛槳PaddlePaddle、Apollo兩大平臺(tái),

        截止目前,百度已在Github主導(dǎo)的18個(gè)開源組織累計(jì)開源項(xiàng)目1,023個(gè)、社區(qū)貢獻(xiàn)者20,000+、獲得Star總數(shù)210,000+。并向Apache基金會(huì)、Linux基金會(huì)、CNCF、開放原子基金會(huì)累計(jì)捐贈(zèng)9個(gè)項(xiàng)目?!?/p>

        一、20個(gè)技術(shù)領(lǐng)域持續(xù)開源

        截止2020年底,在GitHub/Gitee百度官方組織下已經(jīng)圍繞著安全、監(jiān)控、知識(shí)圖譜、網(wǎng)絡(luò)與接入、視覺(jué)、量子計(jì)算、開發(fā)框架等20個(gè)技術(shù)領(lǐng)域開源了86個(gè)項(xiàng)目,其中自然語(yǔ)言處理、開發(fā)框架與前端領(lǐng)域的開源項(xiàng)目數(shù)占比超過(guò)50。

        二、飛槳PaddlePaddle、Apollo已快速成長(zhǎng)為行業(yè)領(lǐng)先者

        1、飛槳PaddlePaddle

        飛槳PaddlePaddle以百度多年的深度學(xué)習(xí)技術(shù)研究和業(yè)務(wù)應(yīng)用為基礎(chǔ),是中國(guó)首個(gè)自主研發(fā)、功能完備、開源開放的產(chǎn)業(yè)級(jí)深度學(xué)習(xí)平臺(tái),集深度學(xué)習(xí)核心訓(xùn)練和推理框架、基礎(chǔ)模型庫(kù)、端到端開發(fā)套件和豐富的工具組件于一體。目前,飛槳累計(jì)開發(fā)者265萬(wàn),服務(wù)企業(yè)超過(guò)10萬(wàn)家,基于飛槳開源深度學(xué)習(xí)平臺(tái)產(chǎn)生了34萬(wàn)+個(gè)模型。飛槳助力開發(fā)者快速實(shí)現(xiàn)AI想法,快速上線AI業(yè)務(wù)。幫助越來(lái)越多的行業(yè)完成AI賦能,實(shí)現(xiàn)產(chǎn)業(yè)智能化升級(jí)。

        飛槳生態(tài)社區(qū)建設(shè):GitHub的所有倉(cāng)庫(kù)(repo)累計(jì) star數(shù)量 55000+(2020年新增30000+),累計(jì) commits超過(guò)16萬(wàn)次,開源貢獻(xiàn)者超過(guò) 5000+,飛槳開發(fā)者技術(shù)專家(PPDE)97位,飛槳特別興趣小組(PPSIG) 7個(gè)。

        2020年發(fā)版情況如下:

        【 1.7.0】版本對(duì)框架功能層面進(jìn)行了重點(diǎn)增強(qiáng),預(yù)測(cè)部署能力全面提升,分布式訓(xùn)練發(fā)布PLSC支持超大規(guī)模分類,并對(duì)參數(shù)服務(wù)器模式進(jìn)行優(yōu)化整合。

        【 1.8.0】版本深度優(yōu)化了命令式編程模式(動(dòng)態(tài)圖)的功能、性能和體驗(yàn),框架基礎(chǔ)功能也進(jìn)一步強(qiáng)化;全新發(fā)布量槳Paddle Quantum量子機(jī)器學(xué)習(xí)框架。

        【2.0-RC1】飛槳核心框架重要升級(jí),先后發(fā)布了2.0-alpha、2.0-beta、2.0-rc0、2.0-rc1共計(jì) 4個(gè)版本。2.0版本為開發(fā)者提供了“編程一致、動(dòng)靜統(tǒng)一”的全新開發(fā)體驗(yàn),動(dòng)態(tài)圖功能走向成熟、API進(jìn)行了全面升級(jí),同時(shí)動(dòng)靜統(tǒng)一的編程體驗(yàn)將為深度概率編程、量子機(jī)器學(xué)習(xí)等前沿學(xué)術(shù)研究提供更好的支持。

        12月20日,在WAVE SUMMIT+2020深度學(xué)習(xí)開發(fā)者峰會(huì)上,飛槳全新發(fā)布PaddleHelix螺旋槳生物計(jì)算平臺(tái);推出業(yè)內(nèi)首個(gè)通用異構(gòu)參數(shù)服務(wù)器架構(gòu);開源算法庫(kù)全面升級(jí),官方算法數(shù)量從140+擴(kuò)展至200+;飛槳硬件生態(tài)伙伴達(dá)到20家,適配或者正在適配的芯片/IP型號(hào)29種。飛槳提供了開源深度學(xué)習(xí)平臺(tái)自主可控的堅(jiān)實(shí)底座,加速AI產(chǎn)業(yè)生態(tài)構(gòu)建。

        在企業(yè)應(yīng)用方面,飛槳已經(jīng)在產(chǎn)業(yè)界廣泛應(yīng)用,合作伙伴包括但不限于:中國(guó)電信、聯(lián)通、工行、小米、OPPO、58同城、國(guó)家電網(wǎng)、昆侖數(shù)智,寧德時(shí)代等(排名不分先后)

        image.png

        2、Apollo

        Apollo開放平臺(tái)是一個(gè)開放的、完整的、安全的平臺(tái),將幫助汽車行業(yè)及自動(dòng)駕駛領(lǐng)域的合作伙伴結(jié)合車輛和硬件系統(tǒng),快速搭建一套屬于自己的自動(dòng)駕駛系統(tǒng)。?Apollo平臺(tái)是百度重點(diǎn)打造的?AI開放平臺(tái)之一,包括有多個(gè)算法模塊:定位、感知、車輛規(guī)劃控制。?

        自2017年開源以來(lái),發(fā)布了9個(gè)版本,從簡(jiǎn)單循跡出發(fā),逐步增加支持高速場(chǎng)景自動(dòng)駕駛、城市場(chǎng)景自動(dòng)駕駛。隨著技術(shù)的發(fā)展,平臺(tái)里也增加了學(xué)術(shù)前沿領(lǐng)域的智能新模型,同時(shí)平臺(tái)系統(tǒng)以及相關(guān)基礎(chǔ)軟件也進(jìn)行了整體性的升級(jí)。Apollo平臺(tái)今年發(fā)布了6.0版本,主要功能包含:

        1)智能新模型:基于語(yǔ)義地圖的規(guī)劃模仿學(xué)習(xí)模型,模仿學(xué)習(xí)老司機(jī),提升動(dòng)態(tài)避障能力。

        2)安全無(wú)人化:支持遠(yuǎn)程平行駕駛接口,監(jiān)測(cè)通信設(shè)備狀態(tài),壓縮傳輸視頻和音頻信號(hào),保持穩(wěn)定的通訊連接,接受遠(yuǎn)程操作指令,下發(fā)規(guī)劃控制指令操作車輛;音頻檢測(cè)緊急車輛,通過(guò)多聲道麥克風(fēng)捕捉音頻,判斷緊急車輛方位,判斷緊急車輛靠近或遠(yuǎn)離。

        3)系統(tǒng)升級(jí)Bazel、Python、C++、GCC、CUDA、PCL、Pytorch、TensorRT等基礎(chǔ)軟件。

        4)開放新服務(wù),整合Dreamland和Fuel,統(tǒng)一服務(wù)入口;整合離散服務(wù),由單個(gè)服務(wù)到聯(lián)動(dòng)服務(wù)。

        5)?V2X車路協(xié)同,車路協(xié)同升級(jí),首發(fā)對(duì)象級(jí)別的車端感知與路側(cè)感知融合特性。

        2020年,Apollo開發(fā)者社區(qū)已擁有來(lái)自全球97個(gè)國(guó)家,55000多名開發(fā)者,涵蓋221多所高校,308多家科技公司,57多家車企。目前,社區(qū)累計(jì)發(fā)布內(nèi)容超過(guò)1200篇,其中開發(fā)者貢獻(xiàn)內(nèi)容60余篇。此外,面向自動(dòng)駕駛行業(yè)開發(fā)者的研發(fā)產(chǎn)品——Apollo自動(dòng)駕駛開發(fā)套件(Apollo D-KIT),已為100多家高校、科研機(jī)構(gòu)及行業(yè)伙伴提供研發(fā)支持。作為全球最大自動(dòng)駕駛開放平臺(tái),Apollo擁有生態(tài)合作伙伴達(dá)210家,幾乎囊括全球主流汽車制造商、一級(jí)零部件供應(yīng)商、芯片公司、傳感器公司、交通集成商、出行企業(yè)等,覆蓋從硬件到軟件的完整產(chǎn)業(yè)鏈。

        截止目前,Apollo測(cè)試車隊(duì)規(guī)模已達(dá)500輛級(jí)別,獲得專利數(shù)2900件,測(cè)試?yán)锍炭傆?jì)超過(guò)700萬(wàn)公里,獲得測(cè)試牌照總計(jì)近200張,其中載人測(cè)試牌超過(guò)120張。同時(shí),百度還將北京市自動(dòng)駕駛測(cè)試管理聯(lián)席小組發(fā)布的首批T4級(jí)別自動(dòng)駕駛測(cè)試牌照收入囊中,成為中國(guó)第一家、也是唯一獲得此級(jí)別牌照的企業(yè)。2020年3月份,全球知名調(diào)研機(jī)構(gòu)NR,將Apollo列為全球自動(dòng)駕駛領(lǐng)域四大“領(lǐng)導(dǎo)者”之一。

        Apollo依靠合作共贏的開放平臺(tái),帶動(dòng)全球的開發(fā)者、汽車制造商、百余家高校,互惠互利,造福人類發(fā)展。

        03累計(jì)向4大基金會(huì)捐贈(zèng)了九個(gè)開源項(xiàng)目

        1、超級(jí)鏈(XuperChain)

        2019年5月,百度基于持續(xù)多年在區(qū)塊鏈技術(shù)與應(yīng)用領(lǐng)域的研究與探索,推出了完全自主知識(shí)產(chǎn)權(quán)的區(qū)塊鏈底層技術(shù)——超級(jí)鏈(XuperChain)并正式開源,現(xiàn)已成為國(guó)內(nèi)最具影響力的區(qū)塊鏈開源技術(shù)之一,其具有四大核心技術(shù)亮點(diǎn),如下:

        1高度易用:多語(yǔ)言智能合約支持、多語(yǔ)言sdk+合約模板;詳解全面文檔中心;IDE、瀏覽器、可視化管理工具等;724H技術(shù)客服+繁榮生態(tài)支持;

        2超高性能:超級(jí)節(jié)點(diǎn)技術(shù);鏈內(nèi)并行技術(shù);存儲(chǔ)、計(jì)算可水平擴(kuò)展;合約ACL背書驗(yàn)簽技術(shù);

        3高可擴(kuò)展:動(dòng)態(tài)內(nèi)核技術(shù)保證架構(gòu)上高可擴(kuò)展;多引擎架構(gòu)技術(shù)保證核心流程和技術(shù)選型可按場(chǎng)景訂制;超級(jí)節(jié)點(diǎn)技術(shù)保證存儲(chǔ)和計(jì)算上高可擴(kuò)展;

        4高可用性:超級(jí)鏈開放網(wǎng)絡(luò)多節(jié)點(diǎn)長(zhǎng)期運(yùn)行驗(yàn)證,穩(wěn)定性gt;=99.99;14w節(jié)點(diǎn)廣告聚屏案例生產(chǎn)環(huán)境檢驗(yàn);

        2020年9月,超級(jí)鏈成為首個(gè)捐贈(zèng)給開放原子開源基金會(huì)的項(xiàng)目;

        2020年10月,開放原子開源基金會(huì)宣布成立國(guó)內(nèi)首個(gè)區(qū)塊鏈開源工作組,工作組由百度發(fā)起,與浪潮、招商銀行等知名企業(yè)共同成立,在開放原子開源基金會(huì)指導(dǎo)下進(jìn)行區(qū)塊鏈相關(guān)事務(wù)的專項(xiàng)管理。

        2020年XuperChain項(xiàng)目累計(jì)獲得Star數(shù) 1266個(gè),F(xiàn)ork 287次,代碼提交次660次,貢獻(xiàn)者37人,全球開發(fā)者使用數(shù)量 10,000+次,外部代碼貢獻(xiàn) 20+,版本迭代12次,技術(shù)專利發(fā)布425篇,社群人數(shù)達(dá) 10,000人。在架構(gòu)、功能、性能上也有較大的提升:

        1架構(gòu):內(nèi)核技術(shù)XuperCore獨(dú)立發(fā)展,依托動(dòng)態(tài)內(nèi)核技術(shù),實(shí)現(xiàn)廣域場(chǎng)景適用;

        2功能:落地了國(guó)密算法、合約事件、EVM虛擬機(jī)等實(shí)用功能;持續(xù)完善聯(lián)盟場(chǎng)景支持,完成了XPoA共識(shí)、靜態(tài)P2P網(wǎng)絡(luò)、平行鏈群組技術(shù)等技術(shù)的落地;

        3易用性:智能合約語(yǔ)言支持JAVA、Solidity等語(yǔ)言;智能合約SDK支持跨鏈、可信計(jì)算等高級(jí)功能;

        同時(shí)今年完成了適配BSN區(qū)塊鏈網(wǎng)絡(luò)服務(wù)底層,還將全新升級(jí)的百度超級(jí)鏈內(nèi)核XuperCore作為區(qū)塊鏈開源工作組的內(nèi)核技術(shù)。為信浦存證平臺(tái)、鏈上巨鹿政務(wù)服務(wù)、百度文庫(kù)、百信銀行、浦發(fā)銀行、北京互聯(lián)網(wǎng)法院等20余家企業(yè)機(jī)構(gòu)及平臺(tái),提供底層技術(shù)服務(wù)與區(qū)塊鏈解決方案。

        2、Apache?ECharts

        2020年,百度繼續(xù)深度參與 Apache ECharts的項(xiàng)目開發(fā)及社區(qū)建設(shè)工作,保持著穩(wěn)定的發(fā)版節(jié)奏,并在年底發(fā)布了全新重量級(jí)的 Apache ECharts 5,在最新版本中,實(shí)現(xiàn)了五大模塊、十五項(xiàng)特性的全面升級(jí)。此外,經(jīng)過(guò)兩年時(shí)間 Apache Way的學(xué)習(xí)和開源社區(qū)的建設(shè),ECharts于 2020年 12月正式從 Apache軟件基金會(huì)畢業(yè),成為頂級(jí) Apache項(xiàng)目,也是首個(gè)百度捐贈(zèng)到Apache基金會(huì)中畢業(yè)的項(xiàng)目。

        在最新大版本 Apache ECharts 5中,重點(diǎn)圍繞圖表的敘事能力,在動(dòng)態(tài)敘事、視覺(jué)設(shè)計(jì)、交互能力、開發(fā)體驗(yàn)以及可訪問(wèn)性等方面做了專項(xiàng)優(yōu)化升級(jí),幫助開發(fā)者更方便地創(chuàng)建具有強(qiáng)大敘事能力的圖表。

        1動(dòng)態(tài)敘事:敘事功能提供了更簡(jiǎn)便的方式以展現(xiàn)數(shù)據(jù)在時(shí)間維度上的發(fā)展變化;

        2視覺(jué)設(shè)計(jì):根據(jù)可視化理論優(yōu)化設(shè)計(jì),提高信息墨水比,讓讀者更專注在重要的數(shù)據(jù)信息;

        3交互能力:多狀態(tài)設(shè)計(jì)讓讀者參與交互,交互的豐富性和流暢性使得用戶更深刻理解數(shù)據(jù)之間的關(guān)聯(lián);

        4開發(fā)體驗(yàn):默認(rèn)更強(qiáng)大更好用,讓開發(fā)者無(wú)需為性能、數(shù)據(jù)處理等問(wèn)題分心,更高效地專注在傳遞信息

        5可訪問(wèn)性:無(wú)障礙設(shè)計(jì)讓視覺(jué)障礙人士能夠平等了解圖表傳遞的信息。

        隨著產(chǎn)品不斷迭代,以及社區(qū)發(fā)展上的發(fā)力,給 Apache ECharts帶來(lái)了開發(fā)者的持續(xù)增長(zhǎng)。在 npm上,Apache ECharts的每周下載量約為 25萬(wàn),較去年同期增長(zhǎng) 40。項(xiàng)目在 Github的關(guān)注數(shù)(star)增加到 4.4萬(wàn),較去年同期增長(zhǎng) 15。

        為了使產(chǎn)品能夠可持續(xù)地健康發(fā)展,團(tuán)隊(duì)積極引導(dǎo)開發(fā)者參與到社區(qū)貢獻(xiàn)中,通過(guò)優(yōu)化開發(fā)文檔、建立新手任務(wù)、悉心指導(dǎo) pull request等方式,降低開發(fā)者參與開源共建的門檻,讓更多人能夠加入到社區(qū)貢獻(xiàn)中。在 2020年,項(xiàng)目新發(fā)展 5個(gè) Apache Committer,2個(gè) Apache PPMC。在Github的累計(jì)貢獻(xiàn)者數(shù)量超過(guò)了百位。

        在 ApacheCon 2020上,百度資深研發(fā)工程師出席分享了 Apache ECharts在過(guò)去的一年中在產(chǎn)品和社區(qū)建設(shè)方面取得的進(jìn)展,也讓更多海外的開發(fā)者了解到 ECharts。在許多國(guó)外社交平臺(tái)上,越來(lái)越多的用戶自發(fā)地對(duì) ECharts發(fā)表積極評(píng)價(jià)并向其他人推薦。產(chǎn)品本身的質(zhì)量成為口碑營(yíng)銷的有力途徑。

        在2021年,Apache ECharts作為 Apache軟件基金會(huì)的頂級(jí)項(xiàng)目,必將以更為成熟、開放的姿態(tài),來(lái)迎接新的挑戰(zhàn)和機(jī)遇。

        3、Apache?Doris

        Apache Doris(原百度Palo )是一款基于大規(guī)模并行處理技術(shù)的分布式 SQL數(shù)據(jù)倉(cāng)庫(kù),由百度在2017年開源,2018年進(jìn)入 Apache孵化器。專門應(yīng)對(duì)高并發(fā)、低延時(shí)的Pb級(jí)實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)使用場(chǎng)景,全面兼容MySQL協(xié)議,可以毫秒級(jí)針對(duì)億萬(wàn)級(jí)數(shù)據(jù)進(jìn)行及時(shí)的多維分析透視和業(yè)務(wù)探查。

        在2020年,Star數(shù)增長(zhǎng) 668,Contributor增長(zhǎng) 65,在Apache社區(qū)保持著平均每個(gè)季度發(fā)布一個(gè)大版本,每周發(fā)布一個(gè)3位版本。4月發(fā)布0.12.0版本、11月發(fā)布0.13.0版本。今年新增加14個(gè)新feature:

        1全新的存儲(chǔ)格式SegmentV2

        2?Spark on Doris

        3明細(xì)模型上的物化視圖功能

        4支持ORC格式數(shù)據(jù)的導(dǎo)入

        5動(dòng)態(tài)分區(qū)

        6差集、交集、Grouping Set

        7大查詢落盤

        8物化視圖支持 bitmap_union,?hll_union和 count

        9?Spark導(dǎo)入

        10?RoutineLoad和 StreamLoad支持新的數(shù)據(jù)格式:Json

        11修改 RoutineLoad

        12?Logstash插件

        13支持查詢結(jié)果輸出到文件

        14在delete語(yǔ)句中支持謂詞

        目前,Doris用戶涵蓋字節(jié)跳動(dòng)、美團(tuán)、小米、京東、微博、快手、貝殼找房、愛(ài)奇藝等100+行業(yè)優(yōu)秀企業(yè)。

        4、Apache Teaclave incubating

        Apache Teaclave incubating是全球首個(gè)通用安全計(jì)算平臺(tái),為隱私數(shù)據(jù)計(jì)算賦能,讓安全計(jì)算更簡(jiǎn)單。Teaclave基于硬件安全能力(Intel SGX),確保敏感數(shù)據(jù)在可信域外和離岸場(chǎng)景下安全可控的流通和處理,無(wú)需擔(dān)心隱私數(shù)據(jù)泄露和濫用。同時(shí),Teaclave還支持多方參與的聯(lián)合計(jì)算,打破企業(yè)和組織中的數(shù)據(jù)孤島。Teaclave于 2019年 8月進(jìn)入 Apache基金會(huì)孵化器,2020年 10月,Teaclave社區(qū)正式通過(guò)并發(fā)布了 0.1.0版。

        2020年發(fā)布首個(gè) Apache Incubator版本 0.1.0,啟動(dòng)了對(duì)項(xiàng)目的重構(gòu)計(jì)劃,同時(shí)對(duì)整個(gè)項(xiàng)目代碼和交互的梳理,0.1.0的發(fā)布是項(xiàng)目從誕生到成長(zhǎng)的第一步。

        在以下幾個(gè)方面做了代碼重構(gòu)和功能特性完善:提供了更完善的函數(shù)和數(shù)據(jù)注冊(cè)執(zhí)行,重新設(shè)計(jì)的函數(shù)的開發(fā)流程,支持兼容 protobuf的 RPC定義接口,支持分布式執(zhí)行服務(wù),支持自定義執(zhí)行器,提供更佳完善的文檔,重新設(shè)計(jì)了錯(cuò)誤處理機(jī)制,完善測(cè)試框架和測(cè)試用例,實(shí)現(xiàn)了更多的內(nèi)置函數(shù),支持了更加靈活的遠(yuǎn)程證實(shí)方式(DCAP),重新設(shè)計(jì) RPC方式等等。

        更詳細(xì)的修改可以看版本發(fā)布文檔。這次發(fā)布一共修改了876個(gè)源文件,新增了 78,237行代碼,刪除了 54,846行代碼,并且在 GitHub issue上解決了來(lái)自社區(qū)的102個(gè)問(wèn)題。

        截止目前,Github上Teaclave項(xiàng)目star數(shù)1,205個(gè),新增一名commiter,累計(jì)支持廠內(nèi)多個(gè)團(tuán)隊(duì)業(yè)務(wù)以及數(shù)十家外部開源項(xiàng)目,建立了健康、可持續(xù)的開源社區(qū)和 Teaclave安全計(jì)算生態(tài)。

        5、Apache brpc(incubating)

        Apache brpc(incubating)是一個(gè)用來(lái)構(gòu)建高可用和高性能后臺(tái)服務(wù)的企業(yè)品質(zhì)的RPC開發(fā)框架,在百度內(nèi)部應(yīng)用的非常廣泛,在多個(gè)核心業(yè)務(wù)上都有應(yīng)用。

        自2017年從百度對(duì)外開源,2018年成為Apache開源基金會(huì)孵化項(xiàng)目后,越來(lái)越多的公司在使用它,包括愛(ài)奇藝,B站,小米,螞蟻等。同時(shí),也有更多的同學(xué)對(duì)這個(gè)項(xiàng)目作出貢獻(xiàn)。是百度內(nèi)最常使用的工業(yè)級(jí)RPC框架,有1,000,000+個(gè)實(shí)例不包含client和上千種多種服務(wù)。

        "brpc"的含義是"better RPC"。其特性:

        1囊括百度內(nèi)部所有 RPC協(xié)議,支持多種第三方協(xié)議

        2模塊化設(shè)計(jì),層次清晰,很容易添加自定義協(xié)議

        3全面的服務(wù)發(fā)現(xiàn)、負(fù)載均衡、組合訪問(wèn)支持

        4可視化的內(nèi)置服務(wù)和調(diào)試工具

        5性能上領(lǐng)跑目前其他所有 RPC產(chǎn)品

        項(xiàng)目今年新增一名commiter,累計(jì)star數(shù)11,000個(gè),fork2,700次,發(fā)布了0.9.7新版本:內(nèi)置服務(wù)支持火焰圖、增加gdb bthread堆棧查看工具、適配arm64、支持redis協(xié)議server、備份請(qǐng)求支持熔斷器。、

        6、BFE

        BFE(Beyond Front End),是現(xiàn)代的七層負(fù)載均衡和流量轉(zhuǎn)發(fā)引擎。BFE目前已接入百度大部分流量,每日轉(zhuǎn)發(fā)請(qǐng)求接近1萬(wàn)億,峰值QPS超過(guò)1000萬(wàn)。BFE于2019年7月正式開源,并獲得了廣泛的關(guān)注。

        2020年6月24日,BFE開源項(xiàng)目被CNCF (Cloud Native Computing Foundation,云原生計(jì)算基金會(huì))正式接納為Sandbox Project。這是百度第一個(gè)被CNCF接納的開源項(xiàng)目,也是在網(wǎng)絡(luò)方向上中國(guó)第一個(gè)被CNCF接納的開源項(xiàng)目。

        2020年BFE完成7次版本發(fā)布。截止12月29日,獲得4,213個(gè)Stars,較2019年12月約增長(zhǎng)40。新增Contributer50位。增加多個(gè)新的feature,其中重點(diǎn)功能包括:

        1?Mac和Windows環(huán)境編譯支持

        2用戶限流功能

        3客戶端認(rèn)證,JWT認(rèn)證以及對(duì)接第三方認(rèn)證服務(wù)

        4請(qǐng)求的tagging功能

        5分布式tracing

        6?DoHDNS over HTTPS請(qǐng)求和EDNS

        7?TCP連接的Proxy

        8?gRPC over HTTP/2

        7、Baetyl?

        Baetyl是?Linux Foundation Edge旗下的邊緣計(jì)算項(xiàng)目,旨在將云計(jì)算能力拓展至用戶現(xiàn)場(chǎng)。提供臨時(shí)離線、低延時(shí)的計(jì)算服務(wù),包括設(shè)備接入、消息路由、數(shù)據(jù)遙傳、函數(shù)計(jì)算、視頻采集、AI推斷、狀態(tài)上報(bào)、配置下發(fā)等功能。

        在2019年9月23日,百度宣布將BAETYL捐贈(zèng)給Linux基金會(huì)旗下社區(qū),是首個(gè)LF Edge捐贈(zèng)項(xiàng)目。BAETYL名字源自希臘語(yǔ)βα?τυλο??baítulos,字面意思是House of God,古代指賦予萬(wàn)物生命的圣石。借此意希望該項(xiàng)目能成為賦予萬(wàn)物智能的基石,讓ABC Anywhere。

        今年6月Baetyl正式發(fā)布2.0版本,Baetyl v2提供了一個(gè)全新的邊云融合平臺(tái),采用云端管理、邊緣運(yùn)行的方案,分成邊緣計(jì)算框架和云端管理套件兩部分,支持多種部署方式??稍谠贫斯芾硭匈Y源,比如節(jié)點(diǎn)、應(yīng)用、配置等,自動(dòng)部署應(yīng)用到邊緣節(jié)點(diǎn),滿足各種邊緣計(jì)算場(chǎng)景,特別適合新興的強(qiáng)邊緣設(shè)備,比如 AI一體機(jī)、5G路測(cè)盒子等。v2和 v1版本的主要區(qū)別如下:

        1邊緣和云端框架全部向云原生演化,已支持運(yùn)行在 K8S或 K3S之上。

        2引入聲明式的設(shè)計(jì),通過(guò)影子(Report/Desire)實(shí)現(xiàn)端云同步(OTA)。

        3邊緣框架暫不支持進(jìn)程(native)運(yùn)行模式,由于運(yùn)行在 K3S上,所以整體的資源開銷會(huì)有增加。

        4邊緣框架將來(lái)會(huì)支持邊緣節(jié)點(diǎn)集群。

        8、IME

        IME,Intelligent Mobile Edge,智能移動(dòng)邊緣,立足5G,以AI+視頻為抓手,借助軟硬一體的邊緣計(jì)算平臺(tái)能力,構(gòu)建行業(yè)解決方案底座,屏蔽產(chǎn)業(yè)轉(zhuǎn)型期的典型問(wèn)題,通過(guò)開放合作和協(xié)同創(chuàng)新,支撐企業(yè)快速構(gòu)建各種行業(yè)的解決方案,助力產(chǎn)業(yè)快速智能化轉(zhuǎn)型。

        IME項(xiàng)目源自百度5G移動(dòng)邊緣產(chǎn)品,于2019年5月在Github開源,并于2019年9月貢獻(xiàn)給LF Edge Akraino社區(qū),成為國(guó)內(nèi)首批進(jìn)入LF Edge Akraino并孵化的邊緣計(jì)算平臺(tái)之一。

        目前,IME已經(jīng)進(jìn)入LF Edge Akraino第三個(gè)正式的版本,正在準(zhǔn)備成熟度審核及Release 4的相關(guān)工作,即將成為Akraino核心項(xiàng)目。IME最新版本(V3.0):

        1邊緣集群輕量化,在資源有限的邊緣節(jié)點(diǎn)能夠使得IME組件盡量少得占據(jù)計(jì)算資源,為業(yè)務(wù)讓位。

        2多集群管理,目的是通過(guò)多層級(jí)的分級(jí)自治管理,實(shí)現(xiàn)一次部署下發(fā),全量集群實(shí)現(xiàn)部署的功能。

        3多功能自動(dòng)化交付組件——kube-sitter,旨在把機(jī)器設(shè)備管理、監(jiān)控采集、開機(jī)環(huán)境初始化、軟件包部署管理等主要功能集成于一身,精簡(jiǎn)功能滿足輕量化要求。

        4邊緣節(jié)點(diǎn)自治,使得即使邊緣節(jié)點(diǎn)在與中心機(jī)房斷連甚至中心機(jī)房宕機(jī)的情況下,也可以確保邊緣節(jié)點(diǎn)上的感知算法依舊能正常運(yùn)轉(zhuǎn)。

        9、EDL

        EDL是一個(gè)基于Kubernetes的原生深度學(xué)習(xí)框架,它支持大規(guī)模分布式訓(xùn)練任務(wù)的容錯(cuò)和彈性縮放。 EDL基于Kubernetes優(yōu)先級(jí)的搶占功能,實(shí)現(xiàn)了深度學(xué)習(xí)任務(wù)的彈性調(diào)度。深度學(xué)習(xí)模型訓(xùn)練和具有彈性資源的推理將在云上很常見,諸如Amazon AWS,百度云之類的云計(jì)算資源具有多租戶。?

        在提出了彈性深度學(xué)習(xí)(EDL),該方法使在云上進(jìn)行深度學(xué)習(xí)模型的訓(xùn)練和推理變得更加輕松和高效?,F(xiàn)在,EDL是LF AI基金會(huì)的孵化階段項(xiàng)目。最新版本(0.3.1):

        1在訓(xùn)練過(guò)程中通過(guò)推理型服務(wù)支持彈性訓(xùn)練,例如知識(shí)蒸餾

        2?infernce服務(wù)通過(guò)EDL中的服務(wù)發(fā)現(xiàn)自動(dòng)注冊(cè)

        3計(jì)算機(jī)視覺(jué)和自然語(yǔ)言處理中的知識(shí)蒸餾示例

        頂一下
        (0)
        0%
        踩一下
        (0)
        0%
        ------分隔線----------------------------
        發(fā)表評(píng)論
        請(qǐng)自覺(jué)遵守互聯(lián)網(wǎng)相關(guān)的政策法規(guī),嚴(yán)禁發(fā)布色情、暴力、反動(dòng)的言論。
        評(píng)價(jià):
        文章導(dǎo)航
        推薦內(nèi)容
        主站蜘蛛池模板: 国产人妖ts在线观看免费视频 | 欧美成人免费一区二区| 国产一区二区三区在线观看影院| 91av视频网站| 成人免费乱码大片a毛片| 国产三级电影在线观看| 91香蕉在线视频| 打开腿我想亲亲你下面视频| 亚洲天堂中文字幕在线| 精品国产夜色在线| 国产成人午夜片在线观看| 中文字幕欧美在线观看| 欧美一级视频免费看| 免费在线视频a| 手机看片日韩福利| 好男人在线社区www在线视频免费| 久久精品视频5| 欧美黑人换爱交换乱理伦片| 啊灬啊别停老师灬用力啊视频| 日本最大色倩网站www| 在线黄视频网站| 中文人妻无码一区二区三区| 日韩精品一区二区三区在线观看 | av区无码字幕中文色| 手机在线观看av片| 久久精品国产免费观看三人同眠| 欧美综合中文字幕久久| 免费女人18毛片a级毛片视频| 色哟哟精品视频在线观看| 国产成人在线免费观看| 182tv午夜线路一线路二| 天堂资源bt在线官网| 两根大肉大捧一进一出好爽视频 | 国产欧美日韩三级| 91国内揄拍国内精品对白| 女人18一级毛片免费观看| 中文字幕在线日韩| 日本漫画口工全彩内番漫画丝袜| 亚洲va韩国va欧美va天堂| 欧美日韩精品久久久久| 人人爽天天爽夜夜爽曰|