課程目錄
 大數(shù)據(jù)終將主宰經(jīng)濟(jì)社會(huì),消除個(gè)體差異,成就一元化的經(jīng)濟(jì)體系。網(wǎng)絡(luò)經(jīng)濟(jì)時(shí)代,人們?cè)诮?jīng)濟(jì)社會(huì)中的諸種活動(dòng)通過網(wǎng)絡(luò)賬戶體系來實(shí)現(xiàn),這些活動(dòng)也就是所謂的網(wǎng)絡(luò)賬戶活動(dòng),其基本內(nèi)容更多地體現(xiàn)為賬戶間的關(guān)系。這些賬戶活動(dòng)及其賬戶關(guān)系是由數(shù)字網(wǎng)絡(luò)程序所設(shè)定的、驅(qū)動(dòng)的,且被實(shí)時(shí)地記錄下來。這就形成了所謂的“大數(shù)據(jù)”。因此,大數(shù)據(jù)來源于大量的網(wǎng)絡(luò)賬戶的活動(dòng)及其有效的記錄,簡言之,大數(shù)據(jù)是網(wǎng)絡(luò)賬戶數(shù)據(jù)。
所謂大數(shù)據(jù),麥肯錫全球研究所給出的定義是:一種規(guī)模大到在獲取、存儲(chǔ)、管理、分析方面大大超出了傳統(tǒng)數(shù)據(jù)庫軟件工具能力范圍 的數(shù)據(jù)集合,具有海量的數(shù)據(jù)規(guī)模、快速的數(shù)據(jù)流轉(zhuǎn)、多樣的數(shù)據(jù)類型和價(jià)值密度低四大特征。大數(shù)據(jù)需要特殊的技術(shù),以有效地處理大 量的容忍經(jīng)過時(shí)間內(nèi)的數(shù)據(jù)。適用于大數(shù)據(jù)的技術(shù),包括大規(guī)模并行處理(MPP)數(shù)據(jù)庫、數(shù)據(jù)挖掘電網(wǎng)、分布式文件系統(tǒng)、分布式數(shù)據(jù)庫、云計(jì)算平臺(tái)、互聯(lián)網(wǎng)和可擴(kuò)展的存儲(chǔ)系統(tǒng)。
1.本視頻面向擁有Java語言基礎(chǔ)的同學(xué),以Java語言為藍(lán)本,深入淺出的講解scala語言的語法和特征,并應(yīng)用scala語言,講解spark生態(tài)系統(tǒng)下的大數(shù)據(jù)開發(fā)技術(shù)。
2.視頻講解與實(shí)例練習(xí)相結(jié)合,通過看視頻也能保證知識(shí)得到充分的實(shí)踐,知識(shí)掌握更牢靠。
3.語言部分由淺入深,在掌握函數(shù)式編程和面向?qū)ο蟮幕A(chǔ)上能夠掌握高階函數(shù)編程(作為值的函數(shù)、柯里化、隱式值、隱式轉(zhuǎn)換),使得學(xué)生可以勝任項(xiàng)目中的開發(fā)之外,還可以讀懂Spark源碼,為以后研究Spark架構(gòu)和自己編寫架構(gòu)奠定扎實(shí)的基礎(chǔ)。
4.在綜合案例實(shí)現(xiàn)過程中,通過使用Akka通信模型實(shí)現(xiàn)RPC遠(yuǎn)程通信框架,這樣既可以深入了解Spark的通信機(jī)制,又提升了Scala語言的開發(fā)技能。

郵箱
huangbenjincv@163.com

济南市| 青海省| 兴文县| 班戈县| 都江堰市| 武夷山市| 亳州市| 贵州省| 商水县| 迁安市| 余庆县| 伊吾县| 临夏市| 秦安县| 普定县| 松阳县| 双辽市| 涞水县| 英吉沙县| 搜索| 库尔勒市| 浦县| 蕲春县| 无为县| 大厂| 彰化市| 桐柏县| 镇赉县| 彩票| 铅山县| 漠河县| 拉萨市| 玛纳斯县| 项城市| 泾川县| 于都县| 婺源县| 镇康县| 伊春市| 沙洋县| 玉田县|