2019年4月,我院邀請(qǐng)西安啟光信息技術(shù)有限公司大數(shù)據(jù)技術(shù)方面的專(zhuān)家王鑫義、張海強(qiáng)和馬?,幍葹槲以貉芯可敖處熼_(kāi)展大數(shù)據(jù)課程培訓(xùn)。該培訓(xùn)課程在雁塔校區(qū)西階第五會(huì)議室開(kāi)展,為期4天,我院研究生及部分教師120余人參加了本次培訓(xùn)。
此次培訓(xùn)中,三位專(zhuān)家分別講解了大數(shù)據(jù)的不同方面。專(zhuān)家王鑫義從大數(shù)據(jù)的由來(lái)、Hadoop平臺(tái)的核心組件原理、大數(shù)據(jù)在行業(yè)的應(yīng)用場(chǎng)景、Hadoop的版本進(jìn)化等幾個(gè)方面介紹了大數(shù)據(jù)生態(tài)技術(shù)原理;并從HDFS技術(shù)原理與功能架構(gòu)、MapReduce技術(shù)原理、Yarn技術(shù)原理、HBase技術(shù)原理以及經(jīng)典案例等方面介紹了大數(shù)據(jù)處理的核心組件技術(shù)原理。專(zhuān)家張海強(qiáng)講解并演示了 Hadoop集群的部署和運(yùn)維,包括了Hadoop集群環(huán)境搭建、Hadoop集群管理常用命令及操作、Hadoop副本管理操作、Hadoop集群的監(jiān)控與管理等方法和技術(shù)。專(zhuān)家馬希瑤用兩天時(shí)間講解了Python語(yǔ)言及Python數(shù)據(jù)科學(xué)相關(guān)庫(kù)的操作和應(yīng)用。第一天講解了Python環(huán)境的安裝、Python的基本數(shù)據(jù)類(lèi)型、基本運(yùn)算和表達(dá)式、Python程序的基本控制流程、函數(shù)、模塊導(dǎo)入、異常處理、文件操作等Python基礎(chǔ)知識(shí);第二天講解并演示了Python數(shù)據(jù)科學(xué)相關(guān)庫(kù)的常用操作與實(shí)戰(zhàn)案例,包括常用數(shù)據(jù)科學(xué)相關(guān)庫(kù)的介紹與安裝,Numpy、Pandas、matplotlib、sklearn庫(kù)等常用操作與實(shí)戰(zhàn)案例,并給出了數(shù)據(jù)科學(xué)后續(xù)學(xué)習(xí)的建議。
此次培訓(xùn)將理論介紹和實(shí)踐操作相結(jié)合,參與培訓(xùn)的師生們認(rèn)真聽(tīng)講,并在課前課后積極實(shí)踐,踴躍提問(wèn),取得了比較好的培訓(xùn)效果。通過(guò)此次培訓(xùn),學(xué)生們對(duì)大數(shù)據(jù)分析的價(jià)值、意義和基本原理建立清晰和比較全面的認(rèn)識(shí),掌握了有關(guān)數(shù)據(jù)處理和建模的基本原理和方法,了解和熟悉了大數(shù)據(jù)分析和計(jì)算技術(shù)在醫(yī)療衛(wèi)生、金融、電子商務(wù)、公共管理等領(lǐng)域的實(shí)際應(yīng)用案例。