Twitter將Storm正式開源了,這是一個分布式的、容錯的實(shí)時(shí)計(jì)算系統(tǒng),它被托管在GitHub上,遵循 Eclipse Public License 1.0。Storm是由BackType開發(fā)的實(shí)時(shí)處理系統(tǒng),BackType現(xiàn)在已在Twitter麾下。GitHub上的最新版本是Storm 0.8.0,基本是用Clojure寫的。
Storm為分布式實(shí)時(shí)計(jì)算提供了一組通用原語,可被用于“流處理”之中,實(shí)時(shí)處理消息并更新數(shù)據(jù)庫。這是管理隊(duì)列及工作者集群的另一種方式。 Storm也可被用于“連續(xù)計(jì)算”(continuous computation),對數(shù)據(jù)流做連續(xù)查詢,在計(jì)算時(shí)就將結(jié)果以流的形式輸出給用戶。它還可被用于“分布式RPC”,以并行的方式運(yùn)行昂貴的運(yùn)算。
——————-課程目錄——————-
01、storm+kafka環(huán)境搭建-1.avi 02、storm+kafka環(huán)境搭建-2.avi
03、storm+kafka環(huán)境搭建-3.avi
04、項(xiàng)目分析.avi
05、kafka producer測試.avi
06、storm整合kafka.avi
07、整合項(xiàng)目測試.avi
08、storm 訂單有效性檢查.avi
09、storm 數(shù)據(jù)修正.avi
10、storm 數(shù)據(jù)業(yè)務(wù)入庫處理-1.avi
11、storm 數(shù)據(jù)業(yè)務(wù)入庫處理-2.avi
12、storm 數(shù)據(jù)定時(shí)存庫處理.avi
13、入庫mysql并進(jìn)行測試和bug修復(fù)-1.avi
14、入庫mysql并進(jìn)行測試和bug修復(fù)-2.avi
15、優(yōu)化數(shù)據(jù)結(jié)構(gòu)-確保數(shù)據(jù)不丟失.avi
16、zookeeper鎖機(jī)制.avi
17、增加zookeeper鎖,保證多線程同時(shí)處理數(shù)據(jù)-1.avi
18、增加zookeeper鎖,保證多線程同時(shí)處理數(shù)據(jù)-2.avi
Kafka0.8Optr2.rar
Kafka0.8Storm0.9.1Optr.rar