版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認(rèn)領(lǐng)
文檔簡介
相關(guān)培訓(xùn)方案1、大數(shù)據(jù)技術(shù)與應(yīng)用(7.23-28蕪湖)一、培訓(xùn)對象與要求針對高校大數(shù)據(jù)技術(shù)與應(yīng)用和商務(wù)數(shù)據(jù)分析與應(yīng)用相關(guān)課程教師、學(xué)校主管領(lǐng)導(dǎo)以及相關(guān)科研部門負(fù)責(zé)人。本培訓(xùn)班每個單位選派相關(guān)人員原則上不超過3人。各單位要認(rèn)真做好選派工作,保留選派人員記錄,避免重復(fù)培訓(xùn)。二、培訓(xùn)內(nèi)容24日模塊一、高校如何開設(shè)大數(shù)據(jù)教學(xué)課程24日大數(shù)據(jù)相關(guān)專業(yè)人才需求缺口大數(shù)據(jù)相關(guān)招聘崗位需求分析大數(shù)據(jù)技術(shù)演進與變革應(yīng)對IT新技術(shù)變革,教師知識的儲備與提升在哪個層面進行教學(xué)精彩案例開展大數(shù)據(jù)分析挖掘教學(xué)的形式高校開設(shè)大數(shù)據(jù)的教學(xué)可在多個層面上進行有條件的高??梢蚤_設(shè)云計算專業(yè)不成熟的可在在計算機相關(guān)專業(yè)上增設(shè)數(shù)據(jù)挖掘和分析方向不具備條件的高校可以開設(shè)大數(shù)據(jù)方面的課程模塊二、大數(shù)據(jù)產(chǎn)業(yè)發(fā)展與人才需求大數(shù)據(jù)起源和產(chǎn)生、大數(shù)據(jù)概念的發(fā)展與解析大數(shù)據(jù)在國內(nèi)外發(fā)展現(xiàn)狀、大數(shù)據(jù)在互聯(lián)網(wǎng)發(fā)展現(xiàn)狀大數(shù)據(jù)人才需求以及趨勢大數(shù)據(jù)人才培養(yǎng)體系的最佳實踐模塊三、大數(shù)據(jù)帶來的機遇和挑戰(zhàn)大數(shù)據(jù)能帶來什么、引領(lǐng)社會進入“大數(shù)據(jù)時代”大數(shù)據(jù)對國家、社會的作用、大數(shù)據(jù)將推動經(jīng)濟發(fā)展大數(shù)據(jù)將推動科技發(fā)展進程、開啟商業(yè)智能新階段數(shù)據(jù)分析的發(fā)展——從數(shù)據(jù)到知識大數(shù)據(jù)如何讓商業(yè)更智能、大數(shù)據(jù)應(yīng)用案例帶來數(shù)據(jù)處理新變革、大數(shù)據(jù)的關(guān)鍵技術(shù)大數(shù)據(jù)與云計算、大數(shù)據(jù)技術(shù)的發(fā)展趨勢精彩案例智慧政府智慧城市與大數(shù)據(jù)車聯(lián)網(wǎng)大數(shù)據(jù)輿情分析數(shù)據(jù)治理智能推薦大數(shù)據(jù)與銀行大數(shù)據(jù)營銷分析模塊四、電商日志評論數(shù)據(jù)分析系統(tǒng)京東案例剖析京東數(shù)據(jù)介紹系統(tǒng)的技術(shù)框架選型日志采集系統(tǒng)介紹實戰(zhàn)內(nèi)容(現(xiàn)場實驗環(huán)節(jié))Linux下日志清洗、加載(實戰(zhàn))Web系統(tǒng)最終結(jié)果數(shù)據(jù)展示(演示實驗)25日25日模塊五、YARN架構(gòu)設(shè)計和核心概念YARN出現(xiàn)的背景YARN的設(shè)計思想和基本概念YARN的基礎(chǔ)架構(gòu)YARN的工作流程YARN基礎(chǔ)類庫詳解YARN核心模塊ApplicationMaster詳解YARN核心模塊ResourceManager剖析YARN核心模塊NodeManager詳解HadoopV2資源調(diào)度器詳細(xì)介紹實戰(zhàn)內(nèi)容(現(xiàn)場實驗環(huán)節(jié))基于YARN的應(yīng)用程序設(shè)計和簡單實現(xiàn)案例YARN使用第三方類庫,包含通信、服務(wù)、時間、狀態(tài)等從資源管理角度理解YARN框架ApplicationMaster核心源碼ResourceManager核心源碼NodeManager核心源碼模塊六、基于電商日志數(shù)據(jù)MapReduce高級編程MapReduceV2基本架構(gòu)、原理和相關(guān)角色介紹MapReduceV1和MapReduceV2MapReduceV2中MRAppMaster的工作流程MapReduceV2作業(yè)生命周期理解MapReduceV2資源調(diào)度理解MapReduceV2作業(yè)恢復(fù)和推測執(zhí)行機制介紹剖析MapReduceV2樣例程序代碼流程基本MapReduceV2API概念驅(qū)動代碼Mapper、ReducerHadoop流在MapReduceV2中的使用使用Eclipse進行快速開發(fā)MapReduceV2的編程優(yōu)化滿足解決實際數(shù)據(jù)分析問題的高級MapReduceV2多語言編程實踐實戰(zhàn)內(nèi)容(現(xiàn)場實驗環(huán)節(jié))HadoopStreaming和JavaMapReduceV2編程的差異利用Combiner來減少中間數(shù)據(jù)編寫Partitioner來優(yōu)化負(fù)載平衡直接訪問Hadoop分布式文件系統(tǒng)HDFSMapReduceV2的join操作輔助排序在Reducer方的合并定制開發(fā)Writables和WritableComparable高級類使用SequenceFiles和Avro文件保存二進制數(shù)據(jù)定制開發(fā)InputFormats和OutputFormat基于MapReduceV2的海量日志分析熟悉Java編程IDEEclipseMapReduceV2wordcount實例測試MapReduceV2wordcount源代碼查看講解MapReduceV2實現(xiàn)單詞統(tǒng)計擴展代碼邏輯并測試結(jié)果基于MapReduceV2編寫海量日志的簡單分析需求26日模塊七、基于Hadoo2.*的Hive實戰(zhàn)技巧26日(基于京東數(shù)據(jù))Hive和Pig架構(gòu)和理論基礎(chǔ)Hive的作用和原理說明Hadoop倉庫和傳統(tǒng)數(shù)據(jù)倉庫的協(xié)作關(guān)系Hadoop/Hive倉庫數(shù)據(jù)數(shù)據(jù)流Hive部署和安裝HiveCli的基本用法HQL基本語法京東評論數(shù)據(jù)分析開發(fā)技巧詳解使用JDBC連接Hive進行查詢和分析使用正則表達(dá)式加載數(shù)據(jù)HQL高級語法編寫UDF函數(shù)編寫UDAF自定義函數(shù)使用Sqoop進行數(shù)據(jù)分析使用Oozie和HUE介紹動手安裝Hive,并驗證是否安裝成功現(xiàn)場解決啟動、部署問題,并總結(jié)解決問題的方法使用Hive創(chuàng)建自己的數(shù)據(jù)倉庫使用Hive在數(shù)據(jù)倉庫上進行增刪改查操作模塊八、內(nèi)存計算框架Spark實戰(zhàn)深入Spark核心架構(gòu)Spark集群配置介紹開發(fā)環(huán)境配置搭建Intellij開發(fā)環(huán)境Spark應(yīng)用案例編程RDD緩存策略介紹transformationactionlineage容錯處理寬依賴與窄依賴SparkonYarn實踐Python簡介PySparkAPI27日27日模塊九、Spark計算模型與核心機制Spark計算模型park程序模型彈性分布式數(shù)據(jù)集Spark算子分類及功能Spark工作機制Spark應(yīng)用執(zhí)行機制Spark調(diào)度與任務(wù)分配模塊SparkI/O機制序列化、壓縮Spark塊管理Spark通信模塊通信框架AKKAClient、Master和Worker間的通信容錯機制、Lineage機制Checkpoint機制Shuffler機制實戰(zhàn)內(nèi)容(現(xiàn)場實驗環(huán)節(jié))實踐RDD的轉(zhuǎn)換函數(shù):map、filter、flatMap、sample、groupByKey、reduceByKey、union、join、distinct、cartesian、mapValue、subtract、cache、persist實踐RDD的動作函數(shù):foreachcollectcollectAsMapreduceByKeyLocallylookupcounmttopreducefoldaggregatesaveAsTextFilesaveAsObjectSpark應(yīng)用提交工具(spark-submit,spark-shell)RDD特性、常見操作、緩存策略RDDDependency、Stage常、源碼分析SparkonYARN運行模式及測試模塊十、基于電商日志數(shù)據(jù)的SparkSQL開發(fā)使用SparkSQL的原因SparkSQL的發(fā)展歷程SparkSQL的性能SparkSQL運行架構(gòu)Tree和RulesqlContext的運行過程hiveContext的運行過程catalyst優(yōu)化器解析SparkSQL組件LogicalPlanSqlParserAnalyzerOptimizer深入了解SparkSQL運行計劃不同數(shù)據(jù)源的運行計劃不同查詢的運行計劃SparkSQL應(yīng)用案例京東評論數(shù)據(jù)基于Sparl-sql的分析實戰(zhàn)內(nèi)容(現(xiàn)場實驗環(huán)節(jié))通過SparkSQL對微博數(shù)據(jù)(JSON格式)進行分析處理通過SparkSQL對農(nóng)產(chǎn)品數(shù)據(jù)進行分析處理sqlContext應(yīng)用hiveContext應(yīng)用混合使用、緩存的使用、DSL的使用27日模塊十一、大數(shù)據(jù)本科專業(yè)申報及經(jīng)驗分享27日增設(shè)大數(shù)據(jù)本科專業(yè)的合理性和必要性增設(shè)大數(shù)據(jù)本科專業(yè)的人才培養(yǎng)方案增設(shè)大數(shù)據(jù)本科專業(yè)的基本要求和區(qū)分度大數(shù)據(jù)本科專業(yè)主要課程的設(shè)置要經(jīng)驗大數(shù)據(jù)專業(yè)申報過程其他經(jīng)驗分享三、培訓(xùn)時間及地點時間:2017年7月23-28日(23日下午酒店大廳報到)報到地點:蕪湖中央城大酒店(安師大新校區(qū)北門對面),前臺電話四、考核、結(jié)業(yè)考核:1.集中學(xué)習(xí)的出勤、討論發(fā)言情況,考核權(quán)重為80%;2.結(jié)業(yè)學(xué)習(xí)心得或論文,考核權(quán)重為20%。結(jié)業(yè):考核合格的學(xué)員予以結(jié)業(yè),由安徽省高等學(xué)校師資培訓(xùn)中心頒發(fā)結(jié)業(yè)證書。五、培訓(xùn)費用本期培訓(xùn)收取培訓(xùn)費2000元/人,教材費348元,學(xué)員車旅費及住宿費由教師所在學(xué)校解決。學(xué)習(xí)期間餐飲統(tǒng)一安排?,F(xiàn)金和刷卡支付都可以。轉(zhuǎn)賬賬戶名稱:安徽師范大學(xué),開戶銀行:中國建設(shè)銀行蕪湖市分行中山路支行,銀行帳號:34001672208053001599。請備注“高師省培”。六、幾項具體要求1.學(xué)習(xí)心得:圍繞大數(shù)據(jù)技術(shù)與應(yīng)用進行選題,字?jǐn)?shù)不少于1000字。學(xué)習(xí)心得或論文于2017年8月30日前發(fā)到郵箱07@,由安徽省高等學(xué)校師資培訓(xùn)中心組織評閱。2.報名:請于2017年7月20日前在安徽省高等學(xué)校師資培訓(xùn)中心網(wǎng)站培訓(xùn)報名平臺()報名,并于報到當(dāng)日直接前往上述地點報到。報到時請帶一張一寸正面彩照。聯(lián)系人:安徽省高等學(xué)校師資培訓(xùn)中心田滋軍0553-386938313855304377安徽省高等學(xué)校師資培訓(xùn)中心儒林文化傳媒(北京)有限公司安徽金東方大數(shù)據(jù)科技有限公司
二○一七年六月十六日
2、創(chuàng)新創(chuàng)新骨干教師高級研修班(7月25-30日北京)一、課程安排日期時間具體安排地點7(第1天)10:00-16:00報到、辦理入住并發(fā)放材料酒店大廳18:00-19:30晚餐酒店餐廳7(第2天)9:00-12:00理念方法高校創(chuàng)新創(chuàng)業(yè)教育生態(tài)體系建設(shè)中關(guān)村創(chuàng)新教育教學(xué)實踐基地14:00-17:30創(chuàng)業(yè)思維互聯(lián)網(wǎng)+時代的創(chuàng)業(yè)教育思維7(第3天)9:00-10:00考察交流考察中關(guān)村國家自主創(chuàng)新示范區(qū)展示中心中關(guān)村展示中心10:30-12:00考察中關(guān)村創(chuàng)業(yè)大街社會創(chuàng)業(yè)孵化器的運營模式交流14:00-15:00考察清華大學(xué)x-lab:創(chuàng)意、創(chuàng)新、創(chuàng)業(yè)“三創(chuàng)實踐空間”建設(shè)模式清華大學(xué)15:30-17:30考察北京大學(xué)全球創(chuàng)新創(chuàng)業(yè)中心北京大學(xué)7(第4天)9:00-12:00課程體系創(chuàng)新創(chuàng)業(yè)教育“五創(chuàng)”新模式中關(guān)村創(chuàng)新教育教學(xué)實踐基地14:00-17:30實踐教學(xué)創(chuàng)意激發(fā)與挖掘社會需求創(chuàng)新思維與創(chuàng)新方法7(第5天)9:00-12:00樣品創(chuàng)造與最小單元實現(xiàn)商業(yè)模式設(shè)計與沙盤演練14:00-17:30創(chuàng)業(yè)路演與融資體驗7(第6天)9:00-12:00創(chuàng)業(yè)大賽大學(xué)生創(chuàng)業(yè)大賽組織與獲獎策略中關(guān)村創(chuàng)新教育教學(xué)實踐基地14:00-16:00互動交流教學(xué)經(jīng)驗交流與學(xué)習(xí)成果分享16:00-17:30結(jié)業(yè)典禮結(jié)業(yè)典禮二、主講師資:陳東敏:北京大學(xué)“千人學(xué)者”,北京大學(xué)創(chuàng)新創(chuàng)業(yè)中心主任,北京大學(xué)產(chǎn)業(yè)技術(shù)研究院院長、科技開發(fā)部部長。張國慶:中關(guān)村加一戰(zhàn)略新興產(chǎn)業(yè)人才發(fā)展中心理事長、全國知名創(chuàng)新創(chuàng)業(yè)教育專家。劉春曉:中國科學(xué)院大學(xué)創(chuàng)業(yè)專業(yè)執(zhí)行主任。黃威:中國科學(xué)院未來科學(xué)家種子工程管理中心創(chuàng)新課程研發(fā)中心主任。商克偉:啄木鳥創(chuàng)業(yè)俱樂部執(zhí)行秘書長、藍(lán)石天使合伙人、科技部科技創(chuàng)新CEO特訓(xùn)營助教、中國創(chuàng)新創(chuàng)業(yè)大賽導(dǎo)師。毛付?。豪饪萍脊韭?lián)合創(chuàng)始人兼總裁、北京高校畢業(yè)生就業(yè)促進會專家委員會成員。陳志成:中國人工智能學(xué)會基礎(chǔ)專業(yè)委員會常務(wù)委員,中國通信學(xué)會云計算專家委員會委員,北京格分維科技有限公司董事長。高洋:北京創(chuàng)客加孵化服務(wù)有限公司總經(jīng)理。三、項目組成員組長:曾論中心常務(wù)副主任成員:王后俊中心對外聯(lián)絡(luò)部副主任張磊中心對外聯(lián)絡(luò)部主管陳艷君中心對外聯(lián)絡(luò)部主管四、費用及支付方式1.本期培訓(xùn)收取培訓(xùn)費3000元/人,學(xué)員車旅費及住宿費由教師所在學(xué)校解決。學(xué)習(xí)期間餐飲統(tǒng)一安排。2.付款方式:轉(zhuǎn)賬或報到現(xiàn)場支付(現(xiàn)金或刷卡):開戶行:中國民生銀行上地支行帳號:607791108戶名:中關(guān)村加一戰(zhàn)略新興產(chǎn)業(yè)人才發(fā)展中心五、報名方式1.報名方式:報名人員名單由各院系自行擬定后統(tǒng)一報名2.報名截止時間:2016年7月22日前3.報到及食宿地點:北京武青會議中心(北京市海淀區(qū)杏石口路18號,電話,具體圖示及乘車路線見附件二4.報名聯(lián)系:參加培訓(xùn)的學(xué)員可于7月22日之前電話中關(guān)村加一戰(zhàn)略新興產(chǎn)業(yè)人才發(fā)展中心(后文有詳細(xì)聯(lián)系電話),并按規(guī)定日期直接前往報到、參加培訓(xùn)。5.請教師準(zhǔn)備一寸正面彩照兩張,照片背后寫上姓名。六、聯(lián)系方式1.電話185109199492.聯(lián)系人:曾論3.地址:北京市海淀區(qū)中關(guān)村軟件園二期中興通大廈B座三層。中關(guān)村加一戰(zhàn)略新興產(chǎn)業(yè)人才發(fā)展中心2017年6月8日3、高校師資培訓(xùn)管理者高級研修班培訓(xùn)簡章(8月4-7日巢湖)為貫徹落實國家和省中長期教育改革和發(fā)展規(guī)劃綱要(2010—2020年)精神,把握新形勢下師資培訓(xùn)新動向,提升全省高校師資培訓(xùn)管理者的綜合能力,提高高校師資隊伍整體素質(zhì),安徽省教育廳人事處委托安徽省高校師資培訓(xùn)中心組織開展全省高校師資培訓(xùn)管理者研修班,為培養(yǎng)高素質(zhì)高端技能人才提供優(yōu)質(zhì)的師資保障。現(xiàn)將有關(guān)事宜通知如下:一、培訓(xùn)對象與要求針對高校高校師資培訓(xùn)管理者的培訓(xùn)。本培訓(xùn)班每所院校選派相關(guān)人員原則上不超過3人。各院校要認(rèn)真做好選派工作,保留選派人員記錄,避免重復(fù)培訓(xùn)。二、培訓(xùn)內(nèi)容1、集中
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 2026四川雅安市老干部活動中心招聘1人筆試備考題庫及答案解析
- 2026浙江金華市武義縣城鄉(xiāng)環(huán)境服務(wù)有限公司招聘1人筆試備考題庫及答案解析
- 2026湖南永州市廉潔征兵筆試參考題庫及答案解析
- 2025年多媒體應(yīng)用設(shè)計師筆試及答案
- 2025年大學(xué)高校財務(wù)管理崗筆試及答案
- 2025年boss心理測試筆試及答案
- 2025年達(dá)州鋼鐵集團筆試及答案
- 2025年建筑集團招聘筆試題庫及答案
- 2025年內(nèi)蒙古教招英語筆試及答案
- 2025年醫(yī)院會計事業(yè)編考試真題及答案
- 殘疾人服務(wù)與權(quán)益保護手冊(標(biāo)準(zhǔn)版)
- 車隊春節(jié)前安全培訓(xùn)內(nèi)容課件
- 2025年溫州肯恩三位一體筆試英語真題及答案
- 云南師大附中2026屆高三高考適應(yīng)性月考卷(六)歷史試卷(含答案及解析)
- PCR技術(shù)在食品中的應(yīng)用
- 輸液滲漏處理課件
- 教育培訓(xùn)行業(yè)發(fā)展趨勢與機遇分析
- 2025醫(yī)療器械經(jīng)營質(zhì)量管理體系文件(全套)(可編輯!)
- 物業(yè)與商戶裝修協(xié)議書
- 湖南鐵道職業(yè)技術(shù)學(xué)院2025年單招職業(yè)技能測試題
- GB/T 46318-2025塑料酚醛樹脂分類和試驗方法
評論
0/150
提交評論