大數(shù)據(jù)技術與應用專業(yè)建設.doc

大數(shù)據(jù)技術與應用專業(yè)建設調(diào)研報告大數(shù)據(jù)技術與應用專業(yè)建設調(diào)研報告自黨的十八大以來，我國提出了實施國家大數(shù)據(jù)戰(zhàn)略的重大決策。國務院和相關部門先后印發(fā)了促進大數(shù)據(jù)發(fā)展行動綱要、大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)劃（20162020年）等指導性文件。各部門、各地方高度重視，據(jù)不完全統(tǒng)計，我國已有20多個省級地方和10余個部委出臺了本地區(qū)、本行業(yè)大數(shù)據(jù)發(fā)展規(guī)劃，我國大數(shù)據(jù)發(fā)展已經(jīng)正式駛?cè)肟燔嚨馈?015年9月5日經(jīng)李克強總理簽批，國務院印發(fā)促進大數(shù)據(jù)發(fā)展行動綱要（以下簡稱綱要），系統(tǒng)指導我國大數(shù)據(jù)發(fā)展的國家頂層設計和總體部署大數(shù)據(jù)發(fā)展工作。綱要提出從政府大數(shù)據(jù)、新興產(chǎn)業(yè)大數(shù)據(jù)、安全保障體系三個方面著手推進大數(shù)據(jù)領域十大工程建設，將我國大數(shù)據(jù)發(fā)展推向了另一個制高點。職業(yè)教育服務經(jīng)濟與社會發(fā)展，必須緊跟產(chǎn)業(yè)發(fā)展步伐，隨著經(jīng)濟增長方式轉(zhuǎn)變而“動”，跟著產(chǎn)業(yè)結(jié)構(gòu)調(diào)整升級而“走”，圍著企業(yè)技能型人才需求而“轉(zhuǎn)”，適應市場的需求而“變”。在大數(shù)據(jù)技術飛速發(fā)展的今天，職業(yè)教育必須緊跟大數(shù)據(jù)產(chǎn)業(yè)發(fā)展步伐。為了更好地了解相關行業(yè)企業(yè)對大數(shù)據(jù)人才的需求，促進大數(shù)據(jù)技術與應用專業(yè)教學及專業(yè)建設，大數(shù)據(jù)技術與應用專業(yè)教學資源庫建設團隊在國內(nèi)外針對大數(shù)據(jù)在行業(yè)企業(yè)的需求開展了調(diào)研。一、調(diào)研目的1、了解大數(shù)據(jù)行業(yè)企業(yè)對大數(shù)據(jù)技術與應用專業(yè)人才的需求傾向、人才需求規(guī)格預測、就業(yè)預測、人才的市場定位等；2、了解大數(shù)據(jù)行業(yè)企業(yè)對大數(shù)據(jù)技術與應用專業(yè)人才培養(yǎng)模式、培養(yǎng)目標的意見，以及對專業(yè)知識、崗位分工、職業(yè)技能等的要求；3、了解往屆相關專業(yè)畢業(yè)生在工作單位的表現(xiàn)及用人單位對往屆畢業(yè)生的工作、崗位能力評價；4、與相關企業(yè)建立校企合作模式，促進教學與社會實踐的聯(lián)系，為大數(shù)據(jù)技術與應用專業(yè)教學資源庫的專業(yè)建設、課程體系建設及培養(yǎng)模式尋找更完善的發(fā)展方向。二、調(diào)研方式1. 問卷調(diào)查：印制問卷涵寄或面交，請企業(yè)相關人員作答。2. 實地調(diào)研：教師到企業(yè)和用人單位實地調(diào)研。3. 座談調(diào)研：邀請用人單位的技術人員、管理人員到系里開展座談交流。4. 網(wǎng)上調(diào)查：到網(wǎng)上搜索有關人才需求、課程設計、教學計劃等信息。三、國內(nèi)外大數(shù)據(jù)發(fā)展現(xiàn)狀（一）大數(shù)據(jù)產(chǎn)業(yè)呈現(xiàn)爆炸式增長由IDC和EMC聯(lián)合發(fā)布的The Digital Universe of Opportunities : Rich Data and the Increasing Value of Internet of Things研究報告中指出，2011年全球數(shù)據(jù)總量已達到1.8ZB，并將以每兩年翻一番的速度增長，到2020年，全球數(shù)據(jù)量將達到40ZB，均攤到每個人身上達到5200GB以上。圖2-1 2014-2020年中國大數(shù)據(jù)市場規(guī)模及增速在“2017年世界電信和信息化社會日大會”上，工信部總工程師張峰指出，我國的數(shù)據(jù)總量正在以年均50%的速度持續(xù)增長，預計到2020年，我國數(shù)據(jù)總量在全球占比將達到21%。美國市場研究公司IDC發(fā)布的報告稱，全球大數(shù)據(jù)技術和服務市場將在未來幾年保持31.7%的年復合增長率，2016年總規(guī)模達到238億美元。（二）大數(shù)據(jù)產(chǎn)業(yè)應用需求擴張大數(shù)據(jù)產(chǎn)業(yè)應用包括了政府/公共事業(yè)、物流零售、文化娛樂、能源/制造、金融/保險、旅游、IT互聯(lián)網(wǎng)電信等行業(yè)，可以看出大數(shù)據(jù)已經(jīng)受到廣泛的行業(yè)關注。圖2-2 大數(shù)據(jù)在中國的行業(yè)分布參與大數(shù)據(jù)調(diào)查的行業(yè)中，來自能源/制造行業(yè)的最多，比例達44.9%，其次是政府與公共事業(yè)部，比例為17%，第三則是金融與保險行業(yè)，為10.3%。接下來，分別是物流零售（8.7%）、文化娛樂（6.3%）、IT/互聯(lián)網(wǎng)/電信（5.8%）、旅游（3.36%）。與數(shù)據(jù)規(guī)模的調(diào)查數(shù)據(jù)相對比，我們發(fā)現(xiàn)50TB以上的數(shù)據(jù)容量主要分布在能源/制造（47.8%）、金融/保險（20.5%）與政府/公共事業(yè)（15.9%）。從各個行業(yè)對大數(shù)據(jù)調(diào)研的參與程度其實已經(jīng)可以反映出各行業(yè)對大數(shù)據(jù)的關注程度，能源/制造行業(yè)對于市場行情的數(shù)據(jù)更為敏感，歷史的商品行情對于未來的產(chǎn)品設計、風險評估以及市場導向都有較強的參考意義。而隨著政府與公共事業(yè)的服務意識的強加與轉(zhuǎn)變，以及更智慧的執(zhí)政與管理理念的帶動，對于數(shù)據(jù)的管理與分析的需求也在日益加強。在金融與保險行業(yè)，則是傳統(tǒng)的數(shù)據(jù)量大戶，而在新時代更好更快的發(fā)現(xiàn)客戶金融習慣，將是金融與保險行業(yè)未來競爭必須要做的事情。其次，物流零售的數(shù)據(jù)價值也在日益顯現(xiàn)，成為排名第四的參與調(diào)查的行業(yè)，而新興的，數(shù)據(jù)積累（尤其是非結(jié)構(gòu)化數(shù)據(jù)）歷史尚淺的文化娛樂、IT/互聯(lián)網(wǎng)/電信行業(yè)則分列第五和第六。看來大數(shù)據(jù)已經(jīng)成為眾多行業(yè)關注和探討的話題，其影響力已經(jīng)覆蓋了從傳統(tǒng)的制造行業(yè)到新型的文化娛樂、IT、互聯(lián)網(wǎng)行業(yè)。（三）人才供不應求美國人才招聘市場的數(shù)據(jù)分析領先者WANTED Analytics和Forbes對來自150個國家的10億個崗位信息進行了統(tǒng)計，基于“數(shù)據(jù)分析”、“數(shù)據(jù)采集”、“數(shù)據(jù)挖掘”和“數(shù)據(jù)結(jié)構(gòu)”四項技能的大數(shù)據(jù)專業(yè)人才市場需求分析，在對過去12個月美國就業(yè)市場“大數(shù)據(jù)”相關崗位的分析中發(fā)現(xiàn)：需要“大數(shù)據(jù)”技能的崗位空缺呈現(xiàn)高速增長。麥肯錫全球研究所（MGI）和麥肯錫商業(yè)技術辦公室在對醫(yī)療、公共、零售、制造業(yè)和個人定位等五個領域內(nèi)詳細研究了大數(shù)據(jù)發(fā)展趨勢后發(fā)布的研究報告預測：由于大數(shù)據(jù)的引入，會造成信息分析人才的缺乏，預計到2018年，僅美國就需要1419萬信息分析專業(yè)人才以及150萬懂得大數(shù)據(jù)的管理人員和分析師。大數(shù)據(jù)不僅提高了產(chǎn)業(yè)價值，還能夠大幅度的拉動就業(yè)。隨著各大公司紛紛上馬大數(shù)據(jù)業(yè)務，對大數(shù)據(jù)人才的需要，市場上正處于十分旺盛的階段。據(jù)Gartner預測，全球?qū)⑿略?40萬個與大數(shù)據(jù)相關的工作崗位。大數(shù)據(jù)的發(fā)展也會催生出一些新職業(yè)如大數(shù)據(jù)分析師、首席數(shù)據(jù)官等，然而人才供給的缺乏正是大數(shù)據(jù)發(fā)展面臨的一個瓶頸。目前企業(yè)發(fā)展大數(shù)據(jù)已步入初級階段，不論是拓展大數(shù)據(jù)業(yè)務的百度、阿里、奇虎360等互聯(lián)網(wǎng)公司，還是專業(yè)提供數(shù)據(jù)服務的大數(shù)據(jù)服務商，對專業(yè)的大數(shù)據(jù)人才均有較高的需求量。而今年，這一“人才荒”的情況正在愈演愈烈，從一定程度上說，人才匱乏已經(jīng)成為制約大數(shù)據(jù)應用產(chǎn)業(yè)發(fā)展的重要因素。圖2-3 大數(shù)據(jù)人才市場需求分析（四）大數(shù)據(jù)技術與應用專業(yè)系統(tǒng)化課程資源匱乏就目前來看，在互聯(lián)網(wǎng)上已經(jīng)擁有了較多的單體資源，例如Java程序設計、MapReduce程序設計、Hadoop體系框架等課程資源非常豐富，但是缺少資源的系統(tǒng)性，很多學習者不知如何去養(yǎng)成職業(yè)崗位能力要求。從目前來看，建設一個大數(shù)據(jù)技術與應用領域的優(yōu)質(zhì)資源庫，同時為學習者提出科學合理的學習建議，是非常有必要的。四、典型工作崗位及能力分析由于我國大數(shù)據(jù)產(chǎn)品正處于起步階段，市場對技能型、操作性的人才需求相對較高，從統(tǒng)計數(shù)據(jù)上看，大數(shù)據(jù)行業(yè)求職者學歷與招聘需求出現(xiàn)錯位，主要表現(xiàn)為大專的招聘需求高于求職者占比，而碩士以上的需求則正好相反。目前，大數(shù)據(jù)相關工作按照專業(yè)范圍和工作特點大致可分為如下1)、數(shù)據(jù)處理類：該類職位要求對數(shù)據(jù)存儲方式和數(shù)據(jù)存儲結(jié)構(gòu)有一定的理解，了解數(shù)據(jù)的定義，并且可以通過多種采集方式獲取原始數(shù)據(jù)，按特定要求處理數(shù)據(jù)。該職位應了解基本的統(tǒng)計學方法，能應用統(tǒng)計學的工具，同時掌握大數(shù)據(jù)平臺的相關操作技術，能將數(shù)據(jù)處理方法通過大數(shù)據(jù)平臺實現(xiàn)。對于企業(yè)來講，這部分人群在工作中對專業(yè)的熟練程度要求也是非常高的，例如能熟練做出因子分析，聚類等基礎技術處理，包括類似的各類數(shù)據(jù)統(tǒng)計處理技術。完成業(yè)務中數(shù)據(jù)的前期預處理和處理基礎工作，提供高質(zhì)量的數(shù)據(jù)供數(shù)據(jù)分析和解讀。2)、大數(shù)據(jù)運維類：該類職位要求具備大規(guī)模服務器集群的運維能力，同時具備大型數(shù)據(jù)庫運維能力。服務器運維包括維護并確保服務器的可用性，不斷優(yōu)化系統(tǒng)架構(gòu)、提升部署效率和優(yōu)化資源利用率等。數(shù)據(jù)庫運維包括具備軟件安裝、配置優(yōu)化、數(shù)據(jù)恢復和遷移、數(shù)據(jù)庫故障排除、預防性巡檢等一系列能力。運維工程師面對的最大挑戰(zhàn)是大規(guī)模服務器集群的管理問題，如何管理好幾十萬臺服務器上的服務，同時保障服務的高可用性，是運維工程師面臨的最大難題。因此，作為運維類工作，特別是大數(shù)據(jù)級的運維工作，職位要求應該具備扎實的基礎知識。包括掌握如Java/Python等至少2種編程語言、熟練掌握常用的算法并能靈活運用、熟悉網(wǎng)絡基礎知識、深入理解Linux操作系統(tǒng)等。同時，在大數(shù)據(jù)環(huán)境下，還應該掌握熟悉分布式計算或者存儲系統(tǒng)。3)、大數(shù)據(jù)技術支持類：大數(shù)據(jù)技術支持類包括售前技術支持和售后技術支持。售前技術支持能夠在大數(shù)據(jù)應用系統(tǒng)實施前遇到無法解決的問題時提供技術支持；售后技術支持能夠在大數(shù)據(jù)應用系統(tǒng)部署完成后，為客戶提供售后服務，幫助工程師診斷并解決大數(shù)據(jù)應用系統(tǒng)使用過程中出現(xiàn)的問題。該類職位需要掌握大規(guī)模服務器集群知識，以及大數(shù)據(jù)相關基礎。具體包括掌握至少1門編程語言、掌握Linux操作系統(tǒng)、掌握分布式計算和存儲系統(tǒng)等。同時技術支持需要面對客戶，應具備一定的溝通和團隊協(xié)作能力。校企專家通過對上述典型工作崗位的能力要求分析研討，形成大數(shù)據(jù)技術與應用專業(yè)崗位職業(yè)能力分析表。表3-4 大數(shù)據(jù)技術與應用主要工作任務描述典型工作任務能力要求知識要求技能要求課程大數(shù)據(jù)平臺運維通過系統(tǒng)監(jiān)控、集群配置等技術手段，保證大數(shù)據(jù)平臺能夠長期穩(wěn)定的支撐企業(yè)大數(shù)據(jù)業(yè)務的工作能力1、掌握計算機基礎知識；2、掌握網(wǎng)絡基礎知識、中小型局域網(wǎng)組建和運維技術；3、掌握服務器及存儲基礎知識，4、掌握主流操作系統(tǒng)（如Linux、Windows）5、掌握主流數(shù)據(jù)庫基礎技術（如oracle、MySQL、NoSql等）6、掌握腳本編寫方法（如shell、Python等）7、掌握Hadoop/Spark相關組件的基礎理論知識及運維工具的使用；8、掌握HDFS、Hbase、hive、yarn等組件的基本操作1、能夠配置和管理網(wǎng)絡設備，完成網(wǎng)絡搭建2、能夠配置和管理服務器和存儲，完成相關設備的維護3、能夠完成操作系統(tǒng)的安裝和配置4、能夠完成大數(shù)據(jù)平臺的日常維護5、能夠使用工具完成大數(shù)據(jù)平臺的軟硬件平臺運行狀態(tài)監(jiān)控6、能夠完成大數(shù)據(jù)平臺的故障應急處理數(shù)據(jù)處理技術（Python）數(shù)據(jù)庫基礎Linux操作系統(tǒng)大數(shù)據(jù)概論網(wǎng)絡技術大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理Hadoop綜合實訓云計算與虛擬化Spark綜合實訓數(shù)據(jù)預處理通過數(shù)據(jù)抽取、整理、傳輸、加載、校驗等技術手段，結(jié)合工具，保證高效的為大數(shù)據(jù)分析提供高質(zhì)量的數(shù)據(jù)資源的工作能力1、掌握計算機基礎知識；2、掌握主流數(shù)據(jù)庫基礎技術（如Oracle、MySQL、NoSql等）3、掌握shell腳本編程，熟悉Java、Python等開發(fā)語言4、掌握Hadoop/Spark相關組件的基礎理論知識及運維工具的使用；1、能夠使用工具從數(shù)據(jù)源抽取所需數(shù)據(jù)2、能夠使用工具對數(shù)據(jù)進行指定操作，如轉(zhuǎn)換、清洗、校驗等3、能夠使用工具完成數(shù)據(jù)加載，如傳輸、建庫、校驗等4、具備分布式ETL過程調(diào)優(yōu)能力應用程序開發(fā)基礎（Java）數(shù)據(jù)處理技術（Python）數(shù)據(jù)庫基礎Hadoop綜合實訓Spark綜合實訓爬蟲技術實訓云計算與虛擬化概率論與數(shù)理統(tǒng)計數(shù)據(jù)清洗大數(shù)據(jù)平臺部署通過綜合運用服務器、交換機、存儲、虛擬化、云計算、大數(shù)據(jù)等基礎知識，保證快速、高效的完成大數(shù)據(jù)平臺環(huán)境等搭建和部署的工作能力1、掌握計算機基礎知識；2、掌握網(wǎng)絡基礎知識、中小型局域網(wǎng)組建和運維技術；3、掌握服務器及存儲基礎知識，4、掌握主流操作系統(tǒng)（如Linux、Windows）5、掌握主流數(shù)據(jù)庫基礎技術（如Oracle、MySQL、NoSql等）6、了解大數(shù)據(jù)基礎知識和基本框架1、能夠配置和管理網(wǎng)絡設備，完成網(wǎng)絡搭建2、能夠配置和管理服務器和存儲，完成相關設備的維護3、能夠完成操作系統(tǒng)的安裝和配置4、能夠完成大數(shù)據(jù)平臺的搭建、測試及調(diào)優(yōu)數(shù)據(jù)庫基礎Linux操作系統(tǒng)大數(shù)據(jù)概論網(wǎng)絡技術大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理大數(shù)據(jù)測試技術Hadoop綜合實訓Spark綜合實訓云計算與虛擬化可視化設計與開發(fā)通過數(shù)據(jù)可視化報表技術、商業(yè)智能報表工具、常用Web開發(fā)框架以及程序開發(fā)語言，能夠進行可視化應用的設計、開發(fā)與展示，直觀的為客戶呈現(xiàn)大數(shù)據(jù)的價值1、掌握主流操作系統(tǒng)（如Linux、Windows）2、掌握數(shù)據(jù)可視化報表技術，如Echarts、Highcharts等3、掌握商業(yè)智能報表工具的設計和使用4、掌握Web開發(fā)框架和程序開發(fā)語言，如PHP、Java、HTML5、CSS、JavaScript等5、掌握數(shù)據(jù)庫相關知識1、能夠使用Web開發(fā)框架進行可視化應用開發(fā)2、能夠根據(jù)行業(yè)領域需求進行可視化設計3、能夠使用BI工具進行商業(yè)智能報表設計、開發(fā)與展示應用程序開發(fā)基礎（Java）數(shù)據(jù)處理技術（Python）數(shù)據(jù)庫基礎大數(shù)據(jù)概論數(shù)據(jù)結(jié)構(gòu)與算法軟件工程Web開發(fā)技術大數(shù)據(jù)可視化技術大數(shù)據(jù)分析技術流式計算技術實訓大數(shù)據(jù)測試技術概率論與數(shù)理統(tǒng)計大數(shù)據(jù)后臺應用開發(fā)實戰(zhàn)OLAP數(shù)據(jù)分析實戰(zhàn)大數(shù)據(jù)倉庫與數(shù)據(jù)挖掘大數(shù)據(jù)應用開發(fā)通過對大數(shù)據(jù)進行分析處理、結(jié)合軟件開發(fā)流程，按照業(yè)務需求完成大數(shù)據(jù)應用開發(fā)的相關軟件設計與實現(xiàn)的工作能力1、掌握軟件工程和軟件開發(fā)基礎知識2、掌握數(shù)據(jù)庫開發(fā)基礎知識3、了解大數(shù)據(jù)開發(fā)平臺4、掌握開發(fā)環(huán)境的設置5、掌握HDFS文件存儲操作6、掌握MapReduce/Spark編程7、了解專業(yè)領域的數(shù)據(jù)分析方法1、能夠搭建好大數(shù)據(jù)程序開發(fā)的環(huán)境2、能夠根據(jù)用戶需求利用開發(fā)語言進行大數(shù)據(jù)分析和預處理3、能夠進行大數(shù)據(jù)應用程序開發(fā)4、 能夠完成功能性測試應用程序開發(fā)基礎（Java）數(shù)據(jù)處理技術（Python）數(shù)據(jù)庫基礎大數(shù)據(jù)概論數(shù)據(jù)結(jié)構(gòu)與算法軟件工程Web開發(fā)技術大數(shù)據(jù)可視化技術大數(shù)據(jù)分析技術流式計算技術實訓大數(shù)據(jù)測試技術概率論與數(shù)理統(tǒng)計大數(shù)據(jù)后臺應用開發(fā)實戰(zhàn)OLAP數(shù)據(jù)分析實戰(zhàn)大數(shù)據(jù)倉庫與數(shù)據(jù)挖掘大數(shù)據(jù)售后技術支持具備綜合型的大數(shù)據(jù)相關基礎知識，快速故障分析定位、基本日志閱讀理解的能力，結(jié)合項目文檔，對大數(shù)據(jù)平臺完成故障排查，采取相應措施，保障大數(shù)據(jù)平臺穩(wěn)定高效運行1、掌握計算機基礎知識；2、掌握網(wǎng)絡基礎知識、中小型局域網(wǎng)組建和運維技術；3、掌握服務器及存儲基礎知識，4、了解主流操作系統(tǒng)（如Linux、Windows）5、了解主流數(shù)據(jù)庫基礎技術（如Oracle、MySQL、NoSql等）6、掌握Hadoop/Spark相關組件的基礎理論知識及運維工具的使用；7、了解大數(shù)據(jù)基礎知識和基本框架8、項目實施文檔撰寫和項目管理知識1、能夠熟練使用Hadoop、Saprk等大數(shù)據(jù)組件和模塊的功能2、可以根據(jù)大數(shù)據(jù)常見組件安裝部署手冊進行系統(tǒng)部署并解決安裝部署中的基礎問題；3、能夠根據(jù)項目售前技術方案與客戶溝通業(yè)務具體需求，撰寫項目實施方案和測試方案；4、具有項目整體管理能力，能夠進行項目整體規(guī)劃、執(zhí)行、風險管理、項目驗收等項目管理相關工作，熟練使用常見項目管理工具如project等；5、了解網(wǎng)絡的交換技術、路由技術以及出口技術等，可以完成中小型網(wǎng)絡的規(guī)劃與設計；6、能夠熟練使用Linux、Windows等常見操作系統(tǒng)7、能夠使用Oracle、SqlServer、MySQL、NoSQL等主流數(shù)據(jù)庫數(shù)據(jù)處理技術（Python）數(shù)據(jù)庫基礎Linux操作系統(tǒng)大數(shù)據(jù)概論網(wǎng)絡技術大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理Hadoop綜合實訓云計算與虛擬化Spark綜合實訓大數(shù)據(jù)文檔編寫參與產(chǎn)品開發(fā)和項目運行全過程中，綜合運用大數(shù)據(jù)相關技術知識，按照正確格式和行業(yè)要求，完成大數(shù)據(jù)產(chǎn)品和相關項目文檔編寫的綜合職業(yè)能力1、掌握計算機基礎知識；2、掌握網(wǎng)絡基礎知識、中小型局域網(wǎng)組建和運維技術；3、掌握服務器及存儲基礎知識4、掌握主流操作系統(tǒng)（如Linux、Windows）5、掌握主流數(shù)據(jù)庫基礎技術（如Oracle、MySQL、NoSql等）6、掌握腳本編寫方法（如shell、Python等）7、掌握Hadoop/Spark相關組件的基礎理論知識及運維工具的使用；8、掌握HDFS、Hbase、Hive、Yarn等組件的基本操作能夠按照正確格式和行業(yè)要求書寫文檔數(shù)據(jù)處理技術（Python）數(shù)據(jù)庫基礎大數(shù)據(jù)概論軟件工程大數(shù)據(jù)測試技術概率論與數(shù)理統(tǒng)計大數(shù)據(jù)系統(tǒng)測試通過大數(shù)據(jù)測試工具，實現(xiàn)對大數(shù)據(jù)應用的功能、性能和可靠性的測試，輸出測試文檔 ，輔助分析并反饋測試結(jié)果1、掌握主流操作系統(tǒng)，如Linux、Windows2、掌握主流數(shù)據(jù)庫基礎技術，如Oracle、Mysql、Nosql等3、掌握測試腳本編寫方法，如shell、Python等4、掌握Hadoop/Spark相關組件的基礎理論知識5、掌握大數(shù)據(jù)相關測試方案及流程6、熟悉自動化測試工具的使用，如bigtop、hibench等1、能夠完成測試文檔編寫（如測試用例、測試報告等）2、能夠完成測試腳本編寫，協(xié)助開發(fā)人員或系統(tǒng)維護人員完成bug修復與調(diào)優(yōu)3、能夠使用自動化測試工具完成大數(shù)據(jù)系統(tǒng)相關測試工作應用程序開發(fā)基礎（Java）數(shù)據(jù)處理技術（Python）數(shù)據(jù)庫基礎大數(shù)據(jù)概論軟件工程大數(shù)據(jù)測試技術概率論與數(shù)理統(tǒng)計大數(shù)據(jù)安全管控通過數(shù)據(jù)安全相關技術手段和策略，保證大數(shù)據(jù)合理化的安全管理，避免惡意入侵、偽裝盜取和內(nèi)部越權訪問等行為造成任何數(shù)據(jù)損失，全方位保護大數(shù)據(jù)的安全1、掌握數(shù)據(jù)安全理論知識2、掌握主流操作系統(tǒng)和系統(tǒng)安全保證技能，如Linux、Windows3、掌握HDFS、HBase、Yarn、Hive等大數(shù)據(jù)相關組件的基本操作4、掌握大數(shù)據(jù)安全功能使用，如數(shù)據(jù)授權、安全策略制定、統(tǒng)一認證功能、數(shù)據(jù)加密、數(shù)據(jù)審計等1、能夠?qū)?shù)據(jù)進行細?；跈喙芾砼c配置2、能夠熟練管理系統(tǒng)認證kerberos組件和通過LDAP、AD對用戶進行統(tǒng)一認證管理3、能夠?qū)Υ髷?shù)據(jù)系統(tǒng)進行審計管理4、能夠?qū)DFS數(shù)據(jù)、元數(shù)據(jù)和其他敏感數(shù)據(jù)進行加密操作5、能夠制定和實施大數(shù)據(jù)安全策略應用程序開發(fā)基礎（Java）大數(shù)據(jù)概論網(wǎng)絡技術大數(shù)據(jù)平臺構(gòu)建大數(shù)據(jù)安全管理大數(shù)據(jù)測試技術Hadoop綜合實訓Spark綜合實訓云計算與虛擬化五、調(diào)研總結(jié)綜上所述，市場對大數(shù)據(jù)人才的需求量日益加大，但是高校的專業(yè)培養(yǎng)卻供不應求。為了適應大數(shù)據(jù)產(chǎn)業(yè)的快速發(fā)展，2016年9月，教育部向普通高等學校、高等職業(yè)教育（?？疲I(yè)目錄增補13個專業(yè)，其中就包括大數(shù)據(jù)技術與應用專業(yè)，正式批準“高職”大數(shù)據(jù)技術與應用專業(yè)作為普通高等學校 高等職業(yè)教育（?？疲I(yè)目錄 2016 年增補專業(yè)（專業(yè)代碼：610215）。經(jīng)過一輪探索后，國家開始加大力度，擴大面積，積極尋找和催生大數(shù)據(jù)專業(yè)人才的培養(yǎng)方式來填補大量人才缺口，但仍不滿足需求。各大高職院校的大數(shù)據(jù)技術與應用專業(yè)均處于起步階段，人才培養(yǎng)課程體系不夠完善，教學科研資源匱乏，專業(yè)師資力量不足。因此，建設大數(shù)據(jù)技術與應用專業(yè)教學資源庫勢在必行。附件1：關于大數(shù)據(jù)技術與應用專業(yè)人才培養(yǎng)方案的調(diào)查問卷（院校版）尊敬的學校領導/老師：您好！我們現(xiàn)正在進行高職學校大數(shù)據(jù)技術與應用專業(yè)教育教學情況的問卷調(diào)研，目的是要通過調(diào)研掌握大數(shù)據(jù)技術與應用專業(yè)人才培養(yǎng)的情況，用以指導今后工作，耽擱您一些時間請您填寫我們的問卷，希望了解您對這些問題的一些看法和評價。謝謝！學校名稱: 學校聯(lián)系電話: 一、 大數(shù)據(jù)技術與應用專業(yè)相關情況1.貴校在開辦軟件技術專業(yè)/專業(yè)群的過程中遇到過哪些困難？（ ）（可多選），其中最大的困難是（ ）（單選）A招生困難； B.實踐環(huán)節(jié)難以開展；C.學生就業(yè)困難； .經(jīng)費不足；E.沒有困難； F.其它（請注明）；2. 貴校軟件專業(yè)/專業(yè)群學生學習的積極性表現(xiàn)為（ ）A. 非常積極； B. 比較積極； C. 一般; D. 不愿學習；3. 貴校軟件專業(yè)/專業(yè)群學生對未來的就業(yè)前景的認識是（ ）A非常好；B.比較好；C.一般；D不理想；4.貴校認為在大數(shù)據(jù)技術與應用專業(yè)人才培養(yǎng)模式中應重點關注學生（ ）A.當前就業(yè)；B.升學；C.兼顧就業(yè)和升學；D.中高職銜接班；E.多崗遷移就業(yè)；F.職業(yè)發(fā)展。5貴校在校企合作方面學生頂崗實習一般如何安排。A校方安排；B.企業(yè)安排；C.學生自主選擇; D.其他 。6貴校在校企合作方面學生頂崗實習一般如何安排在什么時間。A第五學期；B第六學期；C根據(jù)學校需要安排;D.根據(jù)企業(yè)需要安排。5.貴校認為大數(shù)據(jù)技術與應用專業(yè)學生畢業(yè)后主要從事的崗位有（ ）（可多選，請在下表相應位置打）崗位大數(shù)據(jù)運維師大數(shù)據(jù)處理工程師大數(shù)據(jù)開發(fā)工程師云計算運維工程師大數(shù)據(jù)廣告銷售大數(shù)據(jù)媒體營銷工程師數(shù)據(jù)處理員數(shù)據(jù)測試工程師數(shù)據(jù)安全控制員其他二、 大數(shù)據(jù)技術與應用專業(yè)學生能力具備的職業(yè)能力請您對表格中所列能力項對大數(shù)據(jù)技術與應用專業(yè)學生未來發(fā)展的重要程度作出評判，在相應的內(nèi)容處打“”。序號類別能力項（請寫出您認為的）非常重要比較重要一般不重要1職業(yè)能力2專業(yè)能力大數(shù)據(jù)運維師3大數(shù)據(jù)處理工程師4大數(shù)據(jù)開發(fā)工程師5云計算運維工程師6大數(shù)據(jù)廣告銷售7數(shù)據(jù)處理員8數(shù)據(jù)測試工程師9其他能力（請說明）三、 大數(shù)據(jù)技術與應用專業(yè)課程以下是大數(shù)據(jù)技術與應用專業(yè)的專業(yè)課，請您對其重要程度作出評判；此外，以下課程貴校是否都有開設，請在開設的課程后打“”，未開設的課程可不做重要程度評判。序號課程非常比較一般不重要貴校是否已開設重要重要1Java程序設計2Linux操作系統(tǒng)3網(wǎng)絡與云計算基礎4數(shù)據(jù)庫基礎5大數(shù)據(jù)導論6Hadoop平臺配置實訓7數(shù)據(jù)建模8數(shù)據(jù)分析9項目管理文檔編制技巧10可視化表達工具11Python程序設計12數(shù)據(jù)挖掘基礎13算法設計基礎14互聯(lián)網(wǎng)+創(chuàng)新創(chuàng)業(yè)案例分析15數(shù)據(jù)清洗除以上課程外，貴校還另外開設了或者您認為還需要開設哪些專業(yè)課，主要作用（目的）為何？其它專業(yè)課主要作用（目的）123四、 大數(shù)據(jù)技術與應用專業(yè)及專業(yè)群教師對教學資源的獲取情況1貴校大數(shù)據(jù)技術與應用專業(yè)及專業(yè)群建設和教學過程中，最希望得到哪些硬件教學資源？（ ）A專業(yè)實訓設備； B. 圖書資料； C 參考文獻； D. 場地。2. 貴校軟件技術應用專業(yè)及專業(yè)群教師希望獲取哪些基本教學資源（ ）A教材； B. 電子教案；C.題庫；D. 學生實訓手冊；E. 教學大綱；F. 其他。3. 貴校大數(shù)據(jù)技術與應用專業(yè)及專業(yè)群教師想獲取哪些輔助教學資源（ ）A 教學軟件；B. 視頻；C. 案例； D. 動畫； E.微課件； F.其他。五、 大數(shù)據(jù)技術與應用專業(yè)及專業(yè)群教師在自身提高方面的情況1. 貴校大數(shù)據(jù)技術與應用專業(yè)及專業(yè)群教學中的最大困難是什么？（ ）A 教學資源不足 B 缺少指導教師 C 學生學習興趣不足 D 其它2. 目前大數(shù)據(jù)技術與應用專業(yè)及專業(yè)群教師提高自身專業(yè)水平的途徑主要（ ）A學歷教育深造；B自發(fā)科研活動；C參加學術會議；D參與企業(yè)實踐；E學校組織科研活動；F參加培訓班；G各類資格考試；H國內(nèi)外校際訪問交流；I到企業(yè)掛職。3. 將來貴校大數(shù)據(jù)技術與應用專業(yè)及專業(yè)群教師應如何提高自身專業(yè)水平（ ）A學歷教育深造；B自發(fā)科研活動；C參加學術會議；D參與企業(yè)實踐；E學校組織科研活動；F參加培訓班；G各類資格考試；H國內(nèi)外校際訪問交流；I到企業(yè)掛職。4. 目前貴校大數(shù)據(jù)技術與應用專業(yè)及專業(yè)群教師認為最需提高自己的是（ ）A 教學方法； B.專業(yè)知識； C.職稱； D.專業(yè)技能。六、以下是貴校教學模式方面的情況，請?zhí)顚憽?、目前貴校在教學中，是否使用過以下的教學方法：（單選）（1）演示法 經(jīng)常用 B偶爾用 沒用過（2）講授法 經(jīng)常用 B偶爾用 沒用過（3）任務驅(qū)動教學法 經(jīng)常用 B偶爾用 沒用過（4）多媒體教學法 經(jīng)常用 B偶爾用 沒用過（5）實訓操作教學法 經(jīng)常用 B偶爾用 沒用過 （6）啟發(fā)式教學法 經(jīng)常用 B偶爾用 沒用過（7）案例教學法 經(jīng)常用 B偶爾用 沒用過（8）項目教學法 經(jīng)常用 B偶爾用 沒用過（9）情境教學法 經(jīng)常用 B偶爾用 沒用過（10）自學輔導法 經(jīng)常用 B偶爾用 沒用過2、從各類教學方法的課堂效果來看，哪種教學方法較受學生歡迎：（最多選五項）演示法 實訓操作教學法 項目教學法 多媒體教學法 情境教學法 講授法 任務驅(qū)動教學法 案例教學法 啟發(fā)式教學法 自學輔導法 3.貴校軟件技術專業(yè)老師是否嘗試運用新型教學模式：（單選）一直在嘗試摸索（嘗試的是 教學模式）；公開課時有所嘗試已有構(gòu)思，暫未實施 ； 未考慮過4.貴校教學模式對學生學習效果如何（ ）（單選）（1）對專業(yè)知識 很有效；較有效；一般；效果較小；無效果（2）對專業(yè)技能 很有效；較有效；一般；效果較小；無效果（3）對職業(yè)道德 很有效；較有效；一般；效果較??；無效果（4）對綜合能力 很有效；較有效；一般；效果較小；無效果七、以下是貴校評價模式方面的情況，請?zhí)顚憽?、目前貴校軟件技術專業(yè)教育教學主要采用的評價方式有哪些（ ）（最多選五項）紙筆考試或考查；德育考核；作業(yè)、作品實踐考核；觀察記錄；課堂表現(xiàn)； 實訓考試或考查； 檔案袋評價；企業(yè)對學生實習的反饋；其他 。2、貴校目前的評價模式能否激發(fā)學生的學習激情和動力（ ）（單選）總是；經(jīng)常；一般； 極少；不能3、你認為有效的評價模式對促進學生專業(yè)學習的效果如何（ ）（單選）非常有用；比較有用；一般；不太有用；沒有用。4、在軟件技術專業(yè)教育教學中，你認為學生表現(xiàn)的評價主體應包括哪些（ ）（最多選三項）教師評價；學生自評；小組互評；行業(yè)評價；企業(yè)評價；家長評價；其他 5、貴校現(xiàn)在常使用的教學評價內(nèi)