《數據采集與挖掘》課程實驗教學大綱一、課程基本信息課程代碼：21020053課程名稱：《數據采集與挖掘》英文名稱:《DataAcquisitionandMining)》實驗總學時：48適用專業(yè)：會計學、財務管理、審計學課程類別：專業(yè)選修課先修課程：《Python基礎》《初級財務會計學》、《會計學》、《數據庫管理系統(tǒng)》、《管理信息系統(tǒng)》、《財務管理》、《成本會計》等基礎課程實驗教學的性質、目的與任務要求實驗教學的性質和目的大數據時代已經全面開啟，帶來了信息技術發(fā)展的巨大變革，并深刻影響著社會生產和人民生活的方方面面。了解大數據概念、具備大數據思維，是新時代對人才的新要求。本課程通過案例引入并探討大數據的實質，內容深入淺出，通俗易懂，適合財會專業(yè)相關學生們學習。本課程闡述了培養(yǎng)具有數據素養(yǎng)的技術技能型人才所需要的大數據相關基礎知識。在確定知識布局時，秉持的一個基本原則是，緊緊圍繞大數據通識教育核心理念，培養(yǎng)學生的數據意識、數據思維、數據安全和數據分析能力。本實驗教學的內容主要包括大數據概述，大數據思維，數據庫基礎知識，數據采集與挖掘相關應用，數據可視化概論，大數據安全，大數據與云計算、物聯網、人工智能、數字貨幣、區(qū)塊鏈等新一代信息技術的融合應用。為了避免陷入空洞的理論介紹，本實驗教學在很多章節(jié)都融入了豐富的案例，這些案例就發(fā)生在我們生活的大數據時代，很具有代表性和說服力，能夠讓學生直觀感受相應理論的具體內涵。實驗教學的任務要求1、對學生的要求高校課程建設要進一步打破學科、專業(yè)壁壘，推動文科專業(yè)之間的深度融通，以及文科與理工農醫(yī)科的交叉融合，融入現代信息技術，賦能文科教育，實現文科教育的自我革新?！稊祿杉c挖掘》是培養(yǎng)德、智、體、美、勞全面發(fā)展，具有良好的政治素質和道德修養(yǎng)，掌握扎實的基礎理論和專業(yè)知識、良好的團隊意識和協(xié)作能力，打破局限的學科認知和專業(yè)限制，提升自身綜合素養(yǎng)，提升新文科的通識傳承和知識創(chuàng)新能力。具備包括數據思維在內的科學思維能力、解決財會等行業(yè)數據密集型問題為主的動手能力以及大數據分析或大數據應用開發(fā)技能，在財會等相關行業(yè)數據分析系統(tǒng)的開發(fā)、部署與應用等方面具有就業(yè)競爭力的高素質復合型應用人才。針對學生已經具備《管理經濟學》、《經濟法》、《財務管理》等專業(yè)知識和能力的特點，《數據采集與挖掘》試圖采用理論分析與案例講解相結合的方法，使學生能夠全面深入地理解和掌握大數據技術的發(fā)展與演進過程，通過大數據應用的場景介紹，熟悉大數據技術應用的商業(yè)價值，介紹大數據常用編程軟件，了解大數據技術開源平臺和工具，拓展大數據應用能力。本課程，側重實踐操作動手能力培養(yǎng)的一門課程。因此要求學生在深刻理解會計信息系統(tǒng)基本理論、基本方法和基本管理制度的基礎上，側重于具體軟件的操作和應用。課程內容分為數據采集與挖掘基本理論和Phython軟件應用兩部分。2、對教師的要求教師要持續(xù)推動課程教育教學內容更新迭代，培養(yǎng)學生的跨領域知識融通能力和實踐能力。針對學生已經具備《管理經濟學》、《經濟法》、《財務管理》等專業(yè)知識和能力的特點，《數據采集與挖掘》試圖采用理論分析與案例講解相結合的方法，使學生能夠全面深入地理解和掌握大數據技術的發(fā)展與演進過程，通過大數據應用的場景介紹，熟悉大數據技術應用的商業(yè)價值，介紹大數據常用編程軟件，了解大數據技術開源平臺和工具，拓展大數據應用能力。3、培養(yǎng)目標本課程旨在實現以下幾個培養(yǎng)目標：（1）引導學生步入大數據時代，積極投身大數據的變革浪潮之中；（2）了解大數據概念，培養(yǎng)大數據思維，養(yǎng)成數據安全意識；（3）掌握數據采集的基本流程、方法和基本技術；（4）熟悉使用Python語言進行數據采集，能夠獨立設計、開發(fā)、測試和維護爬蟲程序等；（5）養(yǎng)成善于動腦、勤于思考的學習習慣；養(yǎng)成規(guī)范的軟件代碼編寫習慣；具有良好的溝通能力和團隊協(xié)作精神等。4、對實驗條件的相關要求實驗課程對計算機等教學環(huán)節(jié)的軟硬件條件要求如下。硬件要求：(1)計算機，P4-2.4，8G內存，1TG硬盤；(2)自主上機機房管理信息系統(tǒng)；開放機房；(3)網絡環(huán)境，每個小組局域網互通，使用教學系統(tǒng)管理軟件上課；(4)網絡硬盤FTP學生個人空間，方便學生存取個人賬套；(5)資源環(huán)境，專題實驗教學資源網站和實驗教學輔助系統(tǒng)。軟件要求：Python3.8(或更高版本)InternetExplorer6.0+SP1及更高版本IIS5.0及更高版本NETFramework2.0ServicePack1Dockers和Spark實驗教學內容教學方法本課程以課程理論教學為主，并安排課堂討論，以深化學生對知識的理解。在理論教學層面，高屋建瓴地探討大數據，超脫技術講解技術，內容深入淺出，通俗易懂，適合非計算機專業(yè)學生學習；同時，在課堂上為學生展示豐富的實際應用案例，激發(fā)學生學習興趣，開拓學生視野，培養(yǎng)學生大數據思維。教學內容本課程的理論課程相關教學內容如下表所示：項目（或章）主要內容學時安排第1章大數據概論與python數據分析數據的概念、大數據時代到來的背景、大數據的發(fā)展歷程、世界各國的大數據發(fā)展戰(zhàn)略、大數據的概念與影響、大數據的應用以及大數據產業(yè)；Python的安裝；numpy、pandas庫的學習9第1次討論課numpy庫、pandas庫在財務上的應用1第2章 大數據思維；爬蟲、可視化初體驗物聯網的概念和應用、云計算的概念和應用、大數據和云計算以及物聯網的相互關系；爬蟲學習，爬取京東商品評論并可視化；爬取巨潮資訊網公司相關信息并可視化9第2次討論課信息獲取后的加工處理；小組展示1第3章爬蟲進階大數據分析全流程所涉及的各種技術；爬取巨潮資訊網上市公司的股市行情pyecharts庫使用——制作股票價格折線圖9第3次討論課小組展示1第4章可視化進階大數據在各行各業(yè)的主要應用；其他數據網站的爬??；pyecharts庫進階使用——制作3D圖8第4次討論課小組展示1第5章實戰(zhàn)訓練大數據安全問題、數據保護原則、數據安全和隱私保護對策；例子：商協(xié)會政策查詢服務平臺；chatGPT在數據采集與挖掘上的應用8第5次討論課小組展示1合計48本課程的實驗教學部分設計了部分實驗項目，具體如下：實驗項目一實驗名稱：Anaconda和Python安裝與配置實驗內容：安裝Anaconda和Python實驗性質：驗證性實驗實驗學時：3學時實驗目的與要求：Hadoop單機和集群模式的配置或者jupyterhub集群實驗條件：計算機，P4-2.4，8G內存，1TG硬盤；自主上機機房管理信息系統(tǒng)研究與思考：（1）安裝Anaconda和Python；（2）安裝系統(tǒng)的安裝包；（3）課程的思政內容：立足學科分類和課程評價體系改革，系統(tǒng)推進各學科體系課程思政的科學化、專業(yè)化路徑建設，為課程思政改革奠定學科和課程基礎。能為師生提供遠程高效計算存儲平臺。學生可以在線做練習寫代碼，不需要硬件，網頁即可支持R、java和Python語言，能省不少硬件成本。實驗項目二實驗名稱：應用python爬取某政府部門規(guī)范性文件實驗內容：在Hadoop平臺對某政府的部門規(guī)范性文件進行爬取實驗性質：驗證性實驗實驗學時：3學時實驗目的與要求：熟悉Python的NumPy、SciPy、Pandas和Matplotlib各種程序庫,使其在數據分析領域的廣泛應用。能安裝爬蟲所需環(huán)境，創(chuàng)建簡單的爬蟲項目。成功完成爬蟲核心實現。實驗條件：廣東財經大學大數據Hadoop平臺/同心樓實驗室研究與思考：（1）對Python的NumPy、SciPy、Pandas和Matplotlib各種數據庫進行熟悉；（2）創(chuàng)建簡單的爬蟲代碼；（3）運用Python對政府文件進行爬取；（4）課程的思政內容：通過“某政府部門設立小金庫的案例”，引導同學牢記初心使命、樹立政治能力過硬、敢于擔當作為、勇于糾錯防弊的正確價值觀，切實做到“清正廉潔”。python爬取某政府部門規(guī)范性文件，要學生們學習黨和國家的政策，鼓勵學生學好專業(yè)知識。實驗項目三實驗名稱：爬取豆瓣和貓眼電影影評及可視化分析實驗內容：用Python對豆瓣或者貓眼網站中某部電影的影評進行爬取，并對數據進行可視化分析實驗性質：驗證性實驗實驗學時：3學時實驗目的與要求：熟悉Python的NumPy、SciPy、Pandas和Matplotlib各種程序庫,使其在數據分析領域的廣泛應用。能安裝爬蟲所需環(huán)境，創(chuàng)建簡單的爬蟲項目，成功完成爬蟲核心實現，再對爬取出來的影評進行可視化。實驗條件：廣東財經大學大數據Hadoop平臺/同心樓實驗室研究與思考：（1）主要是基于豆瓣電影的數據，進行分析，所以首先要爬取相關的電影數據；（2）ETL預處理；（3）數據分析；（4）可視化；（5）課程的思政內容：爬取數據時應該要注意網絡上很多信息難辨真假，是否涉及商業(yè)機密或個人隱私，要遵紀守法，不濫用所學的技術。課程從現代影視企業(yè)（例如：博納、阿里巴巴影視等）的發(fā)展出發(fā)，結合實證研究的成果和實際案例，探討企業(yè)財務會計信息如何影響資本市場的有效運作以及在公司治理中扮演的角色，幫助學生認識當前財務會計報告的環(huán)境。授課過程中結合課程教學內容，提煉出“公正、誠信、責任感”三個關鍵的思政元素，并融入具體的案例中。實驗項目四實驗名稱：股票動態(tài)數據獲取及可視化分析實驗內容：用Python對同花順網站中某支股票的數據進行爬取，并對數據進行可視化分析實驗性質：驗證性實驗實驗學時：3學時實驗目的與要求：熟悉Python的NumPy、SciPy、Pandas和Matplotlib各種程序庫,使其在數據分析領域的廣泛應用。能安裝爬蟲所需環(huán)境，創(chuàng)建簡單的爬蟲項目，成功完成爬蟲核心實現，再對爬取出來的股票動態(tài)進行可視化。實驗條件：廣東財經大學大數據Hadoop平臺/同心樓實驗室研究與思考：（1）主要是基于股票的動態(tài)進行分析，所以首先要爬取相關的股票數據；（2）ETL預處理；（3）數據分析；（4）可視化；（5）課程的思政內容：用Python對有關金融和經濟數據收集后進行整理和分析，動態(tài)數據呈現，為學校重點學科服務，滿足應用型大學人才培養(yǎng)。通過剖析“控制權轉移中的內幕交易監(jiān)管案例”，深入分析了內幕交易如何違反“公開、公平、公正”原則而對投資者和資本市場造成不良影響，使學生樹立人格要正、自律要嚴的價值思想；通過引用“云南綠大地財務舞弊案例”，分析財務舞弊對投資者和資本市場造成的嚴重負面影響，告誡學生誠信從業(yè)不僅是每一位會計人必須承擔的社會責任，更是會計行業(yè)賴以生存和發(fā)展的基礎。實驗項目五實驗名稱：爬取京東商品評論數據并可視化實驗內容：爬取京東商品評論數據并可視化實驗性質：驗證性實驗實驗學時：3學時實驗目的與要求：要求學生能夠熟悉Python的NumPy、SciPy、Pandas和Matplotlib各種程序庫,使其在數據分析領域的廣泛應用。能安裝爬蟲所需環(huán)境，能夠熟練的運用pyecharts庫將數據可視化實驗條件：廣東財經大學大數據Hadoop平臺/同心樓實驗室研究與思考：（1）主要是基于京東的json數據，進行分析，所以首先要找到存儲相關json數據的網址；（2）ETL預處理；（3）數據分析；（4）可視化；（5）課程的思政內容：爬取數據時應該要注意網絡上很多信息難辨真假，是否涉及商業(yè)機密或個人隱私，要遵紀守法，不濫用所學的技術。課程從電商平臺（例如：京東、淘寶等）的發(fā)展出發(fā)，結合實證研究的成果和實際案例，探討企業(yè)財務會計信息如何影響資本市場的有效運作以及在公司治理中扮演的角色，幫助學生認識當前財務會計報告的環(huán)境。授課過程中結合課程教學內容，提煉出“公正、誠信、責任感”三個關鍵的思政元素，并融入具體的案例中。實驗項目六實驗名稱：商協(xié)會政策數據爬取及可視化分析實驗內容：商協(xié)會政策數據爬取及可視化分析實驗性質：驗證性實驗實驗學時：3學時實驗目的與要求：要求學生能夠熟悉Python的NumPy、SciPy、Pandas和Matplotlib各種程序庫,使其在數據分析領域的廣泛應用。能安裝爬蟲所需環(huán)境，能夠熟練的運用python把爬取商協(xié)會政策數據實驗條件：廣東財經大學大數據Hadoop平臺/同心樓實驗室研究與思考：（1）熟悉Python的操作；（2）安裝所需環(huán)境；（3）創(chuàng)建爬取商協(xié)會政策數據的代碼；（4）課程的思政內容：學習和工作中對學生都是非常重要的，引導學生樹立正確的職業(yè)目標，培養(yǎng)良好的職業(yè)素養(yǎng)和職業(yè)操守，努力學習，成為對祖國有用的人。四、考核方式與標準最終成績由平時作業(yè)成績、平時測驗成績、期末成績和小論文成績等組合而成。各部分所占比例如下：平時考勤成績：10%。出勤以及課堂情況，主要考核對每堂課知識點的理解和掌握程度。實驗報告成績：50%。主要考核數據處理分析能力。平時作業(yè)成績：40%。主要考核對核心知識的理解程度，以小組作業(yè)或個人作業(yè)為考核依據。期末實驗報告或者期末考試成績：50%。主要考核應用Python進行數據爬取，學會簡單的機器學習方法進行數據分析，懂得簡單的數據庫技術，最后分析結果進行可視化。期末考核采用統(tǒng)一命題，分散式考核，最終提交實驗報告的形式。本大綱各部分所規(guī)定基本要求、知識點及知識點下的知識細目，都屬于考核的內容?？荚嚸}覆蓋到各部分，并適當突出重點部分，加大重點內容的覆蓋密度。實驗報告中所涉及不同難度試題的分數比例適當。五、推薦實驗教材和教學參考書實驗教材：1.《Python應用實戰(zhàn)：爬蟲、文本分