中文字幕狠狠干,国产孕妇孕交600集,www一区二区,免费又黄又爽又猛的毛片

推薦 資訊 標(biāo)準(zhǔn) 培訓(xùn) 考試 大賽 關(guān)于我們
  聯(lián)系電話:010-82895227
首屆工業(yè)大數(shù)據(jù)賽項(xiàng)說明
競賽采用實(shí)踐操作技能和技術(shù)答辯相結(jié)合的方式。第一部分實(shí)踐操作技能,首先按照任務(wù)要求對Hadoop平臺進(jìn)行安裝部署操作,再依據(jù)給定的數(shù)據(jù)源、大數(shù)據(jù)實(shí)驗(yàn)環(huán)境以及賽場預(yù)先安裝的軟件等,按照任務(wù)書要求,完成數(shù)據(jù)整合、數(shù)據(jù)存儲、數(shù)據(jù)分析、數(shù)據(jù)可視化等過程,最終形成完整的工業(yè)大數(shù)據(jù)分析報(bào)告,提出合理化建議。然后結(jié)合第二部分技術(shù)答辯給出綜合評分。
競賽時間5小時,競賽連續(xù)進(jìn)行。
(一)Hadoop平臺安裝部署
參賽選手依據(jù)任務(wù)要求,對Hadoop平臺進(jìn)行安裝部署和基本配置。主要內(nèi)容包括:Hadoop集群節(jié)點(diǎn)的動態(tài)增加與刪除、Hadoop集群的負(fù)載均衡、HDFS常用操作命令(查詢文件類別、上傳、刪除文件、查詢HDFS基本統(tǒng)計(jì)信息等)。
(二)數(shù)據(jù)整合
參賽選手根據(jù)現(xiàn)場提供的不同格式的數(shù)據(jù)源,通過整理、清洗、轉(zhuǎn)化、合并等過程,形成完整的單一有效數(shù)據(jù)源。該模塊主要考察選手對混亂數(shù)據(jù)、臟數(shù)據(jù)進(jìn)行數(shù)據(jù)整合的能力,使數(shù)據(jù)和信息集中化,提高資源利用效率。
(三)數(shù)據(jù)存儲
參賽選手在比賽提供的大數(shù)據(jù)平臺環(huán)境下,通過已安裝好的大數(shù)據(jù)平臺組件,把整合好的數(shù)據(jù)或數(shù)據(jù)庫的數(shù)據(jù),存儲到大數(shù)據(jù)平臺指定路徑中。該模塊主要考核選手應(yīng)用大數(shù)據(jù)相關(guān)組件將大數(shù)據(jù)集存儲能力。
(四)數(shù)據(jù)分析
數(shù)據(jù)分析包含了數(shù)據(jù)描述性統(tǒng)計(jì)分析和數(shù)據(jù)建模分析兩項(xiàng)內(nèi)容如下:
數(shù)據(jù)描述性統(tǒng)計(jì)分析部分,參賽選手需熟悉Pig、Hive、Impala等大數(shù)據(jù)分析相關(guān)組件,運(yùn)用SQL語句,查詢hdfs上需要分析的數(shù)據(jù),根據(jù)任務(wù)要求,計(jì)算出最大值、最小值、均值、中位數(shù)、眾數(shù)、方差等常規(guī)統(tǒng)計(jì)分析指標(biāo)。
    數(shù)據(jù)建模分析部分,參賽選手根據(jù)描述統(tǒng)計(jì)分析得出的正確指標(biāo),選擇適當(dāng)?shù)臄?shù)學(xué)模型,利用Spark大數(shù)據(jù)計(jì)算引擎,進(jìn)行迭代計(jì)算。發(fā)現(xiàn)工業(yè)大數(shù)據(jù)中存在的異常點(diǎn),預(yù)測未來發(fā)展變化趨勢。
(五)數(shù)據(jù)可視化
參賽選手利用比賽預(yù)裝軟件,借助于圖形化手段,選擇適當(dāng)?shù)谋憩F(xiàn)形式,清晰有效地傳達(dá)數(shù)據(jù)分析的結(jié)果。該模塊主要考核選手對分析結(jié)果有效展示的能力。
(六)報(bào)告撰寫
參賽選手按照要求,結(jié)合數(shù)據(jù)分析結(jié)論和數(shù)據(jù)可視化產(chǎn)品,輸出完整規(guī)范的數(shù)據(jù)分析報(bào)告。報(bào)告要求量化規(guī)范、重點(diǎn)突出、邏輯清晰、思維嚴(yán)謹(jǐn)、有創(chuàng)新點(diǎn)等。該模塊主要考核選手?jǐn)?shù)據(jù)分析專業(yè)文檔編輯能力。
(七)技術(shù)答辯
通過對完成情況和數(shù)據(jù)分析報(bào)告質(zhì)量分析,闡述工業(yè)大數(shù)據(jù)分析得到的結(jié)論。答辯中要了解:選手對工業(yè)大數(shù)據(jù)整個產(chǎn)品全生命周期各個環(huán)節(jié)產(chǎn)生的各類數(shù)據(jù)及相關(guān)技術(shù)的知識掌握程度。選手須根據(jù)給定場景,從數(shù)據(jù)采集、數(shù)據(jù)整合、數(shù)據(jù)存儲、數(shù)據(jù)分析、數(shù)據(jù)可視化五個方面對項(xiàng)目進(jìn)行準(zhǔn)備.

首屆工業(yè)大數(shù)據(jù)技術(shù)規(guī)程下載http://m.pps.sh.cn/uploadfile/2019/0405/20190405055352100.pdf