數(shù)據(jù)科學(xué)與人工智能：基于SQL和Python的數(shù)據(jù)挖掘、計(jì)算與分析研究【大學(xué)組】

專業(yè)：人工智能,計(jì)算機(jī)科學(xué)

項(xiàng)目類型：全球華人導(dǎo)師-香港

開始時(shí)間：2024年08月17日

是否可加論文：是

項(xiàng)目周期：6周在線小組科研+5周論文指導(dǎo)

語(yǔ)言：中文

有無(wú)剩余名額：名額充足

建議學(xué)生年級(jí)：大學(xué)生

是否必需面試：否

適合專業(yè)：計(jì)算機(jī)科學(xué)機(jī)器學(xué)習(xí)計(jì)算機(jī)工程數(shù)據(jù)科學(xué)數(shù)據(jù)分析深度學(xué)習(xí)人工智能數(shù)據(jù)工程數(shù)據(jù)結(jié)構(gòu)與算法編程語(yǔ)言數(shù)據(jù)庫(kù)和操作系統(tǒng)

地點(diǎn)：無(wú)

建議具備的基礎(chǔ)：對(duì)數(shù)據(jù)挖掘、人工智能、機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、數(shù)據(jù)庫(kù)及對(duì)相關(guān)專業(yè)感興趣的大學(xué)生，建議具備Python基礎(chǔ)

產(chǎn)出：6周【在線小組科研+全球就業(yè)力大師課】+5周論文指導(dǎo)，共126課時(shí) 1500字左右的項(xiàng)目報(bào)告 優(yōu)秀學(xué)員獲得主導(dǎo)師推薦信（8封網(wǎng)推） 項(xiàng)目結(jié)業(yè)證書 EI/CPCI/Scopus/ProQuest/Crossref/EBSCO或同等級(jí)別索引國(guó)際會(huì)議全文投遞與發(fā)表指導(dǎo)或者CNKI檢索的英文普刊全文投遞與發(fā)表指導(dǎo)

項(xiàng)目背景：Hadoop和Spark是當(dāng)前處理大數(shù)據(jù)計(jì)算問(wèn)題應(yīng)用最為廣泛的系統(tǒng)及編程框架，具有快速、通用、魯棒、分布式等特點(diǎn)，支持多種編程語(yǔ)言和數(shù)據(jù)源，并提供多個(gè)可擴(kuò)展的組件庫(kù)如機(jī)器學(xué)習(xí)、圖處理、流處理等。

項(xiàng)目介紹：本課程將通過(guò)大量實(shí)例讓學(xué)生對(duì)Hadoop及Spark有充分了解，并能夠動(dòng)手編寫程序，為未來(lái)面向大數(shù)據(jù)的科研工作打下良好基礎(chǔ)。

項(xiàng)目大綱：MapReduce and Hadoop：簡(jiǎn)介大數(shù)據(jù)處理的挑戰(zhàn)和方法、介紹MapReduce編程模型、介紹Hadoop生態(tài)系統(tǒng)的基本概念和架構(gòu) Spark基礎(chǔ)與RDD：介紹Spark的概念和特點(diǎn)、深入研究彈性分布式數(shù)據(jù)集（RDD）的概念和原理、學(xué)習(xí)如何使用Spark進(jìn)行數(shù)據(jù)處理和轉(zhuǎn)換操作、實(shí)踐編寫基于RDD的Spark應(yīng)用程序 SparkSQL和MLlib：介紹SparkSQL的基本概念和功能、學(xué)習(xí)如何使用SparkSQL進(jìn)行數(shù)據(jù)查詢和分析、探索Spark的機(jī)器學(xué)習(xí)庫(kù)（MLlib）的功能和使用方法、實(shí)踐構(gòu)建和訓(xùn)練Spark的機(jī)器學(xué)習(xí)模型 大數(shù)據(jù)系統(tǒng)的算法設(shè)計(jì)：學(xué)習(xí)大數(shù)據(jù)系統(tǒng)中的算法設(shè)計(jì)方法、探討分布式算法設(shè)計(jì)的最佳實(shí)踐、實(shí)踐運(yùn)用算法設(shè)計(jì)解決實(shí)際大數(shù)據(jù)問(wèn)題 GraphX/GraphFrames：介紹圖數(shù)據(jù)處理的基本概念和應(yīng)用場(chǎng)景、學(xué)習(xí)使用Spark的圖處理庫(kù)GraphX/GraphFrames進(jìn)行圖計(jì)算和分析、探索圖算法的實(shí)現(xiàn)和優(yōu)化策略、實(shí)踐構(gòu)建和分析大規(guī)模圖數(shù)據(jù) 項(xiàng)目答辯與點(diǎn)評(píng)