基于在混合云環(huán)境下的多年耕耘，云杉網(wǎng)絡(luò)自主研發(fā)的云監(jiān)控服務(wù)平臺(tái)DeepFlow已在金融、電信、能源等行業(yè)中的數(shù)十家世界五百強(qiáng)客戶處得到了廣泛的應(yīng)用。我們宣布將DeepFlow核心的可觀測(cè)性數(shù)據(jù)引擎MetaFlow正式開源（5月11日揭曉），我們希望將更好的可觀測(cè)性能力、自動(dòng)追蹤和自動(dòng)標(biāo)簽?zāi)芰﹂_放到整個(gè)行業(yè)，幫助企業(yè)客戶改進(jìn)云原生運(yùn)維工作的運(yùn)行效率、穩(wěn)定性和計(jì)算成本。
MetaFlow是什么？
MetaFlow是一個(gè)高度自動(dòng)化的可觀測(cè)性平臺(tái)，是為云原生應(yīng)用開發(fā)者建設(shè)可觀測(cè)性而量身打造的全棧、全鏈路、高性能數(shù)據(jù)引擎。MetaFlow的AutoTracing能力創(chuàng)新的使用eBPF實(shí)現(xiàn)自動(dòng)化的分布式鏈路追蹤，并自動(dòng)關(guān)聯(lián)OpenTelemetry實(shí)現(xiàn)真正的云原生環(huán)境全棧、全鏈路追蹤。MetaFlow的AutoTagging機(jī)制能夠自動(dòng)為所有觀測(cè)數(shù)據(jù)注入豐富的云原生資源屬性、API屬性標(biāo)簽，打破數(shù)據(jù)孤島，釋放數(shù)據(jù)的下鉆切分能力。
MetaFlow擁有開放的架構(gòu)，基于WASM的可編程應(yīng)用協(xié)議解析能力、可擴(kuò)展的觀測(cè)數(shù)據(jù)源、插件式的分析數(shù)據(jù)庫接口、統(tǒng)一的SQL查詢接口，讓使用者可將其快速融入自己的可觀測(cè)性平臺(tái)中。MetaFlow易于維護(hù)，僅由Agent、Server兩個(gè)組件構(gòu)成，無需依賴任何其他組件即可實(shí)現(xiàn)水平擴(kuò)展與負(fù)載均衡。MetaFlow追求極低的資源消耗，使用Rust實(shí)現(xiàn)采集器，通過SmartEncoding實(shí)現(xiàn)10倍性能的數(shù)據(jù)標(biāo)簽注入。
為什么要開源？
建設(shè)可觀測(cè)性已經(jīng)成為云原生應(yīng)用開發(fā)者的必要工作，然而現(xiàn)有的解決方案正悄無聲息的消耗著開發(fā)者越來越多的時(shí)間。開發(fā)者需要考慮如何埋點(diǎn)插碼，如何傳遞追蹤上下文，如何關(guān)聯(lián)不同類型的數(shù)據(jù)，如何控制數(shù)據(jù)的猖獗增長(zhǎng)，如何避免高基標(biāo)簽，如何維護(hù)越來越復(fù)雜的平臺(tái)，這些工作嚴(yán)重?cái)D占了業(yè)務(wù)開發(fā)工作的時(shí)間。
MetaFlow擁抱開源社區(qū)，設(shè)計(jì)了良好的數(shù)據(jù)源、存儲(chǔ)、可視化擴(kuò)展能力。通過MetaFlow，我們希望讓觀測(cè)更自動(dòng)，讓開發(fā)者更自由。
發(fā)布內(nèi)容：MetaFlow：開源的高度自動(dòng)化可觀測(cè)性平臺(tái)
發(fā)布方式：線上多平臺(tái)直播（云杉網(wǎng)絡(luò)視頻號(hào)、開源中國(guó)視頻號(hào)、云原生社區(qū)視頻號(hào)、開源社KAIYUANSHE視頻號(hào)、示說直播平臺(tái)）
發(fā)布時(shí)間：2022年5月11日（周三） 晚20:00～21:30
演講主題:
《MetaFlow：開源的高度自動(dòng)化可觀測(cè)性平臺(tái)》—— 云杉網(wǎng)絡(luò) 研發(fā)VP 向陽
演講內(nèi)容:
云原生應(yīng)用開發(fā)者獲取可觀測(cè)性的沉重負(fù)擔(dān)
打造可觀測(cè)性數(shù)據(jù)平臺(tái)所要具備的基礎(chǔ)能力
MetaFlow開源可觀測(cè)性平臺(tái)的軟件架構(gòu)
基于eBPF的高度自動(dòng)化可觀測(cè)性能力
全棧、全鏈路的可觀測(cè)性建設(shè)落地實(shí)踐
開放的 MetaFlow，與開發(fā)者共拓更多應(yīng)用場(chǎng)景
聽眾受益
“讓觀測(cè)更自動(dòng)，讓開發(fā)者更自由”，通過此次分享你能了解我們?nèi)绾螐募?xì)節(jié)的軟件架構(gòu)設(shè)計(jì)中體現(xiàn)對(duì)這一使命的追求，而且也能看到eBPF、AutoTracing、AutoTagging、SmartEncoding等技術(shù)在可觀測(cè)性領(lǐng)域極富創(chuàng)新的落地實(shí)踐。
