課程介紹：
在大型網(wǎng)站架構(gòu)的演變過(guò)程中，集中式的架構(gòu)設(shè)計(jì)出于系統(tǒng)的可擴(kuò)展性、可維護(hù)性以及成本等多方面的因素考慮，逐漸被放棄，轉(zhuǎn)而采用分布式的架構(gòu)設(shè)計(jì)。分布式架構(gòu)的核心思想是采用大量廉價(jià)的PC server，構(gòu)建一個(gè)低成本、高可用、高可擴(kuò)展、高吞吐的集群系統(tǒng)，以支撐海量的用戶訪問(wèn)和數(shù)據(jù)存儲(chǔ)，理論上具備無(wú)限的擴(kuò)展能力。分布式系統(tǒng)的設(shè)計(jì)，是一門復(fù)雜的學(xué)問(wèn)，它涉及到包括通信協(xié)議、遠(yuǎn)程調(diào)用，服務(wù)治理，系統(tǒng)安全、存儲(chǔ)、搜索、監(jiān)控、穩(wěn)定性保障、性能優(yōu)化、數(shù)據(jù)分析、數(shù)據(jù)挖掘等方方面面，而本課程將為大家一一進(jìn)行介紹。
—————————-課程目錄—————————-
第一課
大型分布式系統(tǒng)概述
集中式、垂直式、分布式應(yīng)用架構(gòu)的變遷思路
SOA體系架構(gòu)，服務(wù)化的演變
SOA的基礎(chǔ)—rpc遠(yuǎn)程調(diào)用
—rpc與通信協(xié)議
—對(duì)象序列化方式的選擇
—異構(gòu)系統(tǒng)還是同構(gòu)系統(tǒng)
—遠(yuǎn)程調(diào)用的實(shí)現(xiàn)方式，基于http協(xié)議的遠(yuǎn)程調(diào)用，基于tcp協(xié)議的遠(yuǎn)程調(diào)用
第二課
服務(wù)的路由和負(fù)載均衡
—為什么需要服務(wù)治理
—服務(wù)的負(fù)載均衡，復(fù)雜環(huán)境下負(fù)載均衡所面臨的問(wèn)題(負(fù)載不均、多機(jī)房)
—負(fù)載均衡算法及其擴(kuò)展
—如何動(dòng)態(tài)配置路由規(guī)則
—服務(wù)上線下線的動(dòng)態(tài)感知
—客戶端容災(zāi)方案的實(shí)現(xiàn)
—如何使用zookeeper實(shí)現(xiàn)服務(wù)路由和負(fù)載均衡
SOA架構(gòu)所面臨的問(wèn)題
第三課
構(gòu)建安全的分布式網(wǎng)站
常見(jiàn)的web攻擊手段，xss、crsf、sql注入攻擊、DDos攻擊等等
面對(duì)攻擊，應(yīng)該如何防御，具體的防御手段
如何架構(gòu)安全的網(wǎng)站，保障通信的安全
常用的安全算法的使用場(chǎng)景<1>
—校驗(yàn)數(shù)據(jù)是否被篡改，數(shù)字摘要
—加密傳輸內(nèi)容，對(duì)稱加密算法
—校驗(yàn)消息發(fā)送和接收方身份，非對(duì)稱加密算法
第四課
構(gòu)建安全的分布式網(wǎng)站
常用的安全算法的使用場(chǎng)景<2>
數(shù)字簽名及其使用場(chǎng)景
數(shù)字證書(shū)及其使用場(chǎng)景
為什么需要認(rèn)證
—簽名認(rèn)證的原理和實(shí)現(xiàn)
—摘要認(rèn)證的原理和實(shí)現(xiàn)
為什么需要https協(xié)議，https協(xié)議能夠帶來(lái)什么
—https協(xié)議的原理解析
—使用tomcat部署https web
平臺(tái)廠商所面臨的問(wèn)題及開(kāi)放平臺(tái)的出現(xiàn)
oauth協(xié)議解決了什么問(wèn)題及oauth協(xié)議的適用場(chǎng)景
第五課
分布式系統(tǒng)基礎(chǔ)設(shè)施之緩存
—緩存的使用場(chǎng)景
—數(shù)據(jù)一致性的保障
—緩存的負(fù)載均衡問(wèn)題，雪崩效應(yīng)的產(chǎn)生
—如何解決緩存的負(fù)載均衡問(wèn)題
—緩存的強(qiáng)依賴及可靠性的解決
—memcache的介紹及使用
分布式系統(tǒng)基礎(chǔ)設(shè)施之持久化存儲(chǔ)
—IOE太貴，無(wú)法擴(kuò)展，mysql+pc server節(jié)約成本
—pc server的承載有限，業(yè)務(wù)拆分的實(shí)施，mysql復(fù)制策略
—讀的壓力過(guò)大，讀寫(xiě)分離
—單表數(shù)據(jù)量太大，則分表
—寫(xiě)入壓力太大，則分庫(kù)
第六課
分布式系統(tǒng)基礎(chǔ)設(shè)施之持久化存儲(chǔ)
—為提升性能，mysql的取舍
—海量數(shù)據(jù)，高并發(fā)寫(xiě)入，該hbase上場(chǎng)了
—hbase的api，row key的設(shè)計(jì)
—什么場(chǎng)景不適合使用hbase
—小而美的redis，多種數(shù)據(jù)類型，快速存取
—redis數(shù)據(jù)類型的介紹，使用案例
分布式系統(tǒng)基礎(chǔ)設(shè)施之消息系統(tǒng)
—消息系統(tǒng)的使用場(chǎng)景，為什么要使用消息系統(tǒng)
—消息發(fā)送的兩種模式，p2p和訂閱
—消息發(fā)送的一致性和可靠性，最終一致性解決方案
—消息投遞的順序問(wèn)題的產(chǎn)生及消息內(nèi)容的去重
第七課
分布式系統(tǒng)基礎(chǔ)設(shè)施之垂直化搜索引擎
垂直化搜索的使用場(chǎng)景
基于lucene的搜索引擎的基本原理
—構(gòu)建索引
—索引更新與查詢
—結(jié)果排序
—高亮
—中文分詞
—索引優(yōu)化
搜索引擎的擴(kuò)展性
使用搜索引擎所面臨的問(wèn)題
第八課
保障分布式系統(tǒng)的穩(wěn)定性
在線日志分析及常用命令
在線日志分析的技巧，sed、awk、shell的及使用
如何查看服務(wù)器當(dāng)前的狀態(tài)，服務(wù)器的監(jiān)控指標(biāo)解析
—load、cup利用率
—磁盤(pán)剩余空間
—網(wǎng)絡(luò)traffic
—磁盤(pán)IO
—內(nèi)存使用
—qps、rt
jvm gc對(duì)穩(wěn)定性和性能的影響
如何分析jvm產(chǎn)生的gc日志
第九課
保障分布式系統(tǒng)的穩(wěn)定性
集群監(jiān)控及流量控制
—服務(wù)器的心跳檢測(cè)實(shí)現(xiàn)方法
—大流量到來(lái)前，服務(wù)器的容量評(píng)估及應(yīng)用水位的檢測(cè)
—如何對(duì)流量進(jìn)行控制
—服務(wù)穩(wěn)定性的實(shí)現(xiàn)方案: 依賴管理&服務(wù)分級(jí)&優(yōu)雅降級(jí)&開(kāi)關(guān)&應(yīng)急預(yù)案
高并發(fā)系統(tǒng)與普通系統(tǒng)的區(qū)別
—原子操作解決了什么問(wèn)題
—jvm原子操作實(shí)現(xiàn)的原理(包含jvm源代碼解析)
第十課
保障分布式系統(tǒng)的穩(wěn)定性
如何設(shè)計(jì)高并發(fā)系統(tǒng)
—java的多線程同步及鎖的機(jī)制
—分布式條件下數(shù)據(jù)一致性及系統(tǒng)可擴(kuò)展性的保障
—高并發(fā)條件下減庫(kù)存的案例
性能優(yōu)化—找出系統(tǒng)的性能瓶頸
—找出前端的性能問(wèn)題
—監(jiān)測(cè)網(wǎng)頁(yè)的響應(yīng)時(shí)間
—監(jiān)測(cè)java方法的響應(yīng)時(shí)間
第十一課
性能優(yōu)化—找出系統(tǒng)的性能瓶頸
—java應(yīng)用程序gc日志的分析
—影響mysql數(shù)據(jù)庫(kù)性能的因素
為什么要進(jìn)行性能測(cè)試
性能測(cè)試的方法和工具
—apache ab
—apache jmeter
—load runner
性能環(huán)境和真實(shí)環(huán)境的差異
如何進(jìn)行性能優(yōu)化
—前端性能優(yōu)化的實(shí)施
—java程序性能優(yōu)化的實(shí)施
第十二課
如何進(jìn)行性能優(yōu)化
—數(shù)據(jù)壓縮帶來(lái)性能的提升，不同算法效率的比較
—使用緩存提升性能
—mysql數(shù)據(jù)庫(kù)查詢優(yōu)化
—java應(yīng)用程序gc優(yōu)化
—使用新硬件提升性能
java應(yīng)用常用的故障排查工具
—jps&jmap&jinfo&jstack
—mat
—VisualVM
—java應(yīng)用典型問(wèn)題
第十三課
數(shù)據(jù)分析對(duì)于大型分布式網(wǎng)站的意義
分布式文件系統(tǒng)
離線數(shù)據(jù)分析，mapreduce、hive
實(shí)時(shí)數(shù)據(jù)分析，storm
離線數(shù)據(jù)同步，Apache sqoop
實(shí)時(shí)數(shù)據(jù)同步，mysql的實(shí)現(xiàn)方案
數(shù)據(jù)報(bào)表能提供什么，報(bào)表系統(tǒng)的實(shí)現(xiàn)思路
