Twitter將Storm正式開(kāi)源了,這是一個(gè)分布式的、容錯(cuò)的實(shí)時(shí)計(jì)算系統(tǒng),它被托管在GitHub上,遵循 Eclipse Public License 1.0。Storm是由BackType開(kāi)發(fā)的實(shí)時(shí)處理系統(tǒng),BackType現(xiàn)在已在Twitter麾下。GitHub上的最新版本是Storm 0.8.0,基本是用Clojure寫(xiě)的。
Storm為分布式實(shí)時(shí)計(jì)算提供了一組通用原語(yǔ),可被用于“流處理”之中,實(shí)時(shí)處理消息并更新數(shù)據(jù)庫(kù)。這是管理隊(duì)列及工作者集群的另一種方式。 Storm也可被用于“連續(xù)計(jì)算”(continuous computation),對(duì)數(shù)據(jù)流做連續(xù)查詢,在計(jì)算時(shí)就將結(jié)果以流的形式輸出給用戶。它還可被用于“分布式RPC”,以并行的方式運(yùn)行昂貴的運(yùn)算。
——————-課程目錄——————-
01、storm+kafka環(huán)境搭建-1.avi 02、storm+kafka環(huán)境搭建-2.avi
03、storm+kafka環(huán)境搭建-3.avi
04、項(xiàng)目分析.avi
05、kafka producer測(cè)試.avi
06、storm整合kafka.avi
07、整合項(xiàng)目測(cè)試.avi
08、storm 訂單有效性檢查.avi
09、storm 數(shù)據(jù)修正.avi
10、storm 數(shù)據(jù)業(yè)務(wù)入庫(kù)處理-1.avi
11、storm 數(shù)據(jù)業(yè)務(wù)入庫(kù)處理-2.avi
12、storm 數(shù)據(jù)定時(shí)存庫(kù)處理.avi
13、入庫(kù)mysql并進(jìn)行測(cè)試和bug修復(fù)-1.avi
14、入庫(kù)mysql并進(jìn)行測(cè)試和bug修復(fù)-2.avi
15、優(yōu)化數(shù)據(jù)結(jié)構(gòu)-確保數(shù)據(jù)不丟失.avi
16、zookeeper鎖機(jī)制.avi
17、增加zookeeper鎖,保證多線程同時(shí)處理數(shù)據(jù)-1.avi
18、增加zookeeper鎖,保證多線程同時(shí)處理數(shù)據(jù)-2.avi
Kafka0.8Optr2.rar
Kafka0.8Storm0.9.1Optr.rar