推薦課程
average > 0 ? $model->average . '分' : '10.0分' ?>

PB級結構化日志數(shù)據(jù)的高效處理

北京濤思數(shù)據(jù)科技有限公司 TDengine 創(chuàng)始人&核心開發(fā)

陶建輝,1986年考入中國科大,1994年到美國印第安納大學攻讀天體物理博士,曾在美國芝加哥Motorola、3Com等公司從事無線互聯(lián)網(wǎng)的研發(fā)工作,在高可靠分布式系統(tǒng)、即時通信、消息隊列等方面,是頂尖的技術專家。2008年回到北京創(chuàng)辦和信,專注移動互聯(lián)網(wǎng)IP Push和IP實時消息服務,2010年和信被臺灣聯(lián)發(fā)科收購。2013年再度創(chuàng)業(yè),創(chuàng)辦快樂媽咪,專注母嬰智能硬件和母嬰健康服務,2016年初快樂媽咪被太平洋網(wǎng)絡收購。2017年5月又再次走向戰(zhàn)場,創(chuàng)辦濤思數(shù)據(jù),專注時序空間數(shù)據(jù)的實時高效的處理,其自主研發(fā)的產品物聯(lián)網(wǎng)大數(shù)據(jù)平臺TDengine比其他業(yè)內標桿性能好10倍以上,可廣泛運用于物聯(lián)網(wǎng)、車聯(lián)網(wǎng)、工業(yè)大數(shù)據(jù)等領域。2019年7月,TDengine開源,在GitHub全球趨勢排行榜上連續(xù)幾天排名第一。

陶建輝,1986年考入中國科大,1994年到美國印第安納大學攻讀天體物理博士,曾在美國芝加哥Motorola、3Com等公司從事無線互聯(lián)網(wǎng)的研發(fā)工作,在高可靠分布式系統(tǒng)、即時通信、消息隊列等方面,是頂尖的技術專家。2008年回到北京創(chuàng)辦和信,專注移動互聯(lián)網(wǎng)IP Push和IP實時消息服務,2010年和信被臺灣聯(lián)發(fā)科收購。2013年再度創(chuàng)業(yè),創(chuàng)辦快樂媽咪,專注母嬰智能硬件和母嬰健康服務,2016年初快樂媽咪被太平洋網(wǎng)絡收購。2017年5月又再次走向戰(zhàn)場,創(chuàng)辦濤思數(shù)據(jù),專注時序空間數(shù)據(jù)的實時高效的處理,其自主研發(fā)的產品物聯(lián)網(wǎng)大數(shù)據(jù)平臺TDengine比其他業(yè)內標桿性能好10倍以上,可廣泛運用于物聯(lián)網(wǎng)、車聯(lián)網(wǎng)、工業(yè)大數(shù)據(jù)等領域。2019年7月,TDengine開源,在GitHub全球趨勢排行榜上連續(xù)幾天排名第一。

課程費用

6800.00 /人

課程時長

50分鐘以下及更短時間

成為教練

課程簡介

案例背景:
在IT運維、智能駕駛、工業(yè)互聯(lián)網(wǎng)等場景,每天都要采集海量的結構化日志數(shù)據(jù),這些數(shù)據(jù)采用傳統(tǒng)的Hadoop系列工具來處理,都面臨著開發(fā)成本高、運行效率低、運維復雜等問題。除互聯(lián)網(wǎng)大廠外,一般傳統(tǒng)企業(yè)都難以組建一支大數(shù)據(jù)團隊來應對這些挑戰(zhàn),投入產出不成正比。

解決思路:
濤思數(shù)據(jù)針對結構化日志數(shù)據(jù)(時序數(shù)據(jù))的特點,開發(fā)了獨有的處理引擎TDengine,集時序數(shù)據(jù)庫、緩存、消息隊列、流式計算、訂閱等系列功能于一體,而且無論是數(shù)據(jù)插入、簡單查詢還是數(shù)據(jù)聚合的性能,相對Hadoop系統(tǒng),都是10倍以上的提升。

成果:
TDengine的核心代碼已經開源,star超過11K,fork數(shù)2900,issues數(shù)接近2000,收到開發(fā)者的高度好評。目前上線的免費用戶已經超過100家,付費客戶超過30家。

目標收益

1:了解結構化日志數(shù)據(jù)的特點
2:如何高效的插入數(shù)據(jù)
3:如何高效的做實時聚合查詢
4:分布式系統(tǒng)的設計
5:零運維管理是如何做到的

培訓對象

課程內容

案例方向


智能數(shù)據(jù)分析/企業(yè)級大數(shù)據(jù)架構演進/流式計算系統(tǒng)設計/數(shù)據(jù)庫的未來

案例背景


在IT運維、智能駕駛、工業(yè)互聯(lián)網(wǎng)等場景,每天都要采集海量的結構化日志數(shù)據(jù),這些數(shù)據(jù)采用傳統(tǒng)的Hadoop系列工具來處理,都面臨著開發(fā)成本高、運行效率低、運維復雜等問題。除互聯(lián)網(wǎng)大廠外,一般傳統(tǒng)企業(yè)都難以組建一支大數(shù)據(jù)團隊來應對這些挑戰(zhàn),投入產出不成正比。

收益


1:了解結構化日志數(shù)據(jù)的特點
2:如何高效的插入數(shù)據(jù)
3:如何高效的做實時聚合查詢
4:分布式系統(tǒng)的設計
5:零運維管理是如何做到的

解決思路


濤思數(shù)據(jù)針對結構化日志數(shù)據(jù)(時序數(shù)據(jù))的特點,開發(fā)了獨有的處理引擎TDengine,集時序數(shù)據(jù)庫、緩存、消息隊列、流式計算、訂閱等系列功能于一體,而且無論是數(shù)據(jù)插入、簡單查詢還是數(shù)據(jù)聚合的性能,相對Hadoop系統(tǒng),都是10倍以上的提升。

結果


TDengine的核心代碼已經開源,star超過11K,fork數(shù)2900,issues數(shù)接近2000,收到開發(fā)者的高度好評。目前上線的免費用戶已經超過100家,付費客戶超過30家。

活動詳情

提交需求