1、重慶交通大學信息科學與工程學院實驗報告班級：曙光1701班姓名學號：實驗項目名稱:數(shù)據(jù)導入與預處理實驗一實驗項目性質：驗證性、設計性實驗所屬課程:數(shù)據(jù)導入與預處理實驗室（中心）:語音樓八樓指導教師：實驗完成時間：2019年11月1日一實驗目的了解和掌握數(shù)據(jù)庫的恢復，數(shù)據(jù)庫數(shù)據(jù)的變換，數(shù)據(jù)的統(tǒng)計以及可視化；掌握Json數(shù)據(jù)集的API下載方法，數(shù)據(jù)提取，以及導入其他數(shù)據(jù)結構的方法。了解和掌握不同數(shù)據(jù)格式之間的轉換方法；掌握用計算機編程語言實現(xiàn)數(shù)據(jù)的格式轉換以及數(shù)據(jù)信息的提取。二實驗要求1安裝Mysql數(shù)據(jù)庫，以及mysqlworkbench客戶端，2下載對公眾開放的安然(Enron)公司的電子郵件

2、數(shù)據(jù)集。下載地址：在mysql中恢復Enron數(shù)據(jù)庫。數(shù)據(jù)統(tǒng)計每一天和每一周發(fā)郵件的數(shù)量，并用可視化軟件實現(xiàn)可視化。5采用iTunesAPI做個小實驗，利用關鍵詞來生成JSON數(shù)據(jù)結果集。iTunes是由Apple公司提供的一個音樂服務，任何人都可以利用iTunes服務來查找歌曲、藝術家和專輯。在查找的時候需要把搜索關鍵詞添加到iTunesAPIURL的后面。URL中，二后面的是搜索關鍵詞，是一個樂隊的名字，theGrowlers。注意：URL中用+代替空格字符，URL不允許包含空格字符。iTunesAPI會根據(jù)提供的關鍵詞從音樂庫中返回50個結果。整個結果集形成一個JSON文件，每一條音樂信

3、息中的元素，以名字-值的格式存放在JSON文件中。TheGrowlersAppleiTunes的開發(fā)文檔：6.使用一種熟悉的語言，編寫程序，將下載下來的theGrowlers的所有音樂的歌名提取出來，并可視化顯示。三、需求分析提取出安然公司數(shù)據(jù)集中的每天的閱讀量和每周的閱讀量，并畫出趨勢圖提取出iTunes中的trackname數(shù)據(jù)安裝好Mysql和MysqlWorkbenchMySQL瓷MySQLShell猊MySQL.Workbenchft.OCEMyQlInstaller-匚ommunityMy5QLServer8.0WelcometoMySQLWorkbenchMySQLWorkben

4、chistheofficialgraphicaluserinterface(GUI)too)forMySQLItallcwEyoutodesign,createandbrowseyourdatabasesdiemas,workwithdatabaseobjectsandin聽rtdat藥welldesignandrunSQLqueriestoworkwithstoreddataYumcanalsomtgrateschemasanddatafromothedatabasewndorE-toyourMySQLdatabase.|acumentationFledtheBlogDiscusorathe

5、Fo-rumsMySQLConnectionsqLocalinstanceMySQLSO1建立一個新的數(shù)據(jù)庫：卽命AnpiDMySQLr_-sWdertirThtegintii.uMfslide血血Harms:Eperfp-Hw1*JRswreRtfa-nKaficxrFhraelXaUiKfi：JefsJsOwsei7Ctfattoi-rTh*l-HrKaAulufiialiccunlexthelphdisabled.Usethetodbartiiifliiuallygethelpfoshowdatabases|HFDatabase4+enronhappyplaceinfornation_s

6、chemamydatabasemysqlperform呂nce_呂choin呂sakilastudentsysworld+p10rowsinset(0.00sec)下載好安然公司的數(shù)據(jù)集Kenron-iTiysqldjiTi_v5.5ql選用enron數(shù)據(jù)庫，在Mysql中導入安然公司的數(shù)據(jù)集到數(shù)據(jù)!ueryinery!ueryju&ryOKOK,0OK,0Ak.n廣門宵&呂in.o）從p口afrectedjrowsaffectedro*s(0.00sec)OK.0affectedinervrowsafzected,rows(0.06sec)affecro*sfuerv0rowsaffectE

7、ti1warnins(0.05rueryOK.0rowsaffected,:warning(0,07:warning(0,0Csec/0Warnings:0ryscllu&eenronta.bs.OK.:ecords:nysqlSourc&C:Lsersl1494D&sktoplenron-mys規(guī)ldutap_v5.sqlenron-mysq1duro_v5.sqluerylIF.0fc百弋丹干匕2十2”ClDOpal*149rowsaffected(0.02149DupJicates:6.在MysqlWorkbench中查看已經創(chuàng)建好的數(shù)據(jù)庫I血InfamatisnScJh-ema:enr

8、wiHMySQLWorkbershFlitficLitVienQutry1)&tJise：ScrrerTSorLtsn.f也空亦&陰歴駆匚匡農-SQLMditian?Automaticconidisabled.UstliniciiiuallyjetlicurrentcaretptoggleautomSUudenCirffiglt?_UWShxfenlinfbSCHEMASrirrei加ktotmodelRenarneReferenoM_eArefereiwaififoWViews寺OTredfVE氈Mjej產FurmaflsTliappypLact產Tables樹Vi4w$產Storedfrc

9、ceriures丐F”cti口ns；mydatabase7.用SQL語言查找每天的訂閱量（1999年到2017年）甲十Fromerror,messagewhereyear(date)199Saridyedr(date)1999-01431999-01-0521.999-01-06|21399-01-0731999-010841999-01-1241999-01-1371959-01-144LSW-OMS71999-01-1051999-01-191L599-0L-20-1199-01-2111999-01-221L999-01-231199-01-2711ResiltGnd頤電卜AltrRdv

10、jsi矗IdTypesQueryStatsexcel文件如下：(pj獎常切凸蚱-n-舛Awit-yS3副托婀目Fu田-目-3-AdAL-觀曲鈕敘蚯忖JP匸DE133i17L99nb2T1iaL胛鳥L-263LW/S/i320LSW/a12fL9W./31汕始.叭41zfL999/EH一蘋LUWa/Eg?5LQMdP336LSSglD2fFLm.L2*話LB-?L62?r山的.卵口wiAAth：CD8OQ測100用sql語言查找每周的訂閱量faHIfPOIBIOO團ILirrtto1000raws査selectweek(date)+1count數(shù)童；Frmnenron呂亡whereyear(da

11、te)198andyear*(date)40d-f3&70dd4i7b7/mzaf_4Q8a257S79988B24fi78.pIui.aac.p一m4a:nartworkUrBO:nhttps：/is2-ssl.mzstatic.CQm/image/thumb/Mu5i匚4/v4/be/ed/41/beed41b746f9-0309-9e03-3bcOSB274afe/source/30 xSObb.jpg,artworkUrlGO:https:Z/is2-s&l.mjstaticxom/image/thumb/Music4/v4/be/ed/41/beed41b7-46f9-03099e0

12、3-3bc08374afe/source/Gflx60bb.jpgbartworkUrl100:Hhttp2-/image/thumb/Mueic4/v4/be/ed/41/beed41b7-46f9-0309-9eQ3-3bc0S32743fe/source/100 x100bb.jpgnrcollectionPrice:9.99,trackPrice:0.33,reletseDate:1014-09-、Uriii(LFJS-fj.S15Ji(xt將后綴名改為Json:resultCount2SGj.resultsapperTyp#trac顒玄高日：為MgSrtWtTcTP曲$11逝芻Hea

13、llerti&nld，:902B761S2*trackNif!:artisprevieMJirF:審皿山-辭L41腫辭朋pl勺-旳pp1牴-x狀八日西腳1州g応勢輛/卡理桁旳弭何轟甜5軸匚儒】-寸賞時叩per-Typetrack*H(dhcT：*陽卍七1/11閃；302刊創(chuàng)52,*trackTd*:902676162HArtidibprevie*AJr;http石：f/8舌ndioe：siiizum皂客呂耳pl便.口jmFiapp丄輕越st百芒七兮in5尢日日朋岡1丿Musd匸5/W4792/1日/1/921孚電1卡三dl*2卡742吟wrapperTypezr,tratk,kindrsong

14、,artistWeSlSZ,collectianld;926761S2Jtrackld:9026761B3artis-previevAJrl:https;:f/zudin-s;占丄.m肖plm.EumfjapplE-zset5-us-Etd-P翎蛇5it莽)bm/EEi客丸？b凸-2七亡一1存4亡-wrapperlypetrackj,叫incT廠訊吩二artistldrw:4ccllectianldj1144M8&S,TtrackIdw:11447671art.previerfjirl:http%：f/1出uM1L1tunugiigppl宕-自pple-jssg-目-BeaseJ自血/4/丘2

15、12-謫(*wrapperType:HtrackikindrsongartUtldesilZZ,Hcellectionw1*:992675152trackl-d*:92676177ertis,fcprevieiAirl:事辭1itim”丄ppi瓠亡如/護p1龍f強必$W*giggeei州虹iy訶7如/日孕門時鯛押1:3加卡Wd町叩perTypatrick-kindurtistld,B:M511252fHcollctiwiIdH&2671trickld*:902&Mrtipreviewllrl:htp占：厶zudjp=?七no電s日ppi巴.七幻/臼pplig-縣占百毗兮=us-5七d-sdc事

16、/審4/縣c:/勺匸/葛土日匚9匚日目0-abQJ：$總卡日-wrapperTypezr,trackAkind-:songartistld:251L2K2fcvllectiDnIli:Sa&BKlSE-trackld:9063*6343.,arti&-previeWUrli|ittp:fFEudiai-mJ.丄tunes.日pplEaai陽(jple-3殆et孚LiAstdl-R&aQaiJM:it呂MFhff寫37臼1血9勺6&-dffbfl-!9fa匸-wrapperlype:track喙認曠：=artistld:lfi511ieS2,-collectionld-trackld:9663：

17、65&/r,arti-pr-evietAJirl:Kttp!&:/BuijiEi呂占1-.島2|1電-1廿陸#罠|5戸1電一倉車：電|6皐14$-9宅日-目!&自轉1/陽口昌：1蠱57吐4/4:1戻/1：電/1:1訊匕已2自匕$8千寫$8包刖護戸刖丁沖電二”肚1二HikificiMrsor!a5鳩垃護：藥5口2曲$乙Hcellertie-riw1*:99267612.*trackid*:926761a,rtis用python將json格式文件中的Trackname提取出來打開jupyter,編寫代碼結果如下Zti2:foriiniange(si2e);print(Lmtaresults*itr

18、ackName*)BetterTogetherIpsideDownEanajiaPancakesSitting?1aiting?rishingBTeskdc-TnGoodPeopleYouandYourHeartFlakeIfIHadEyesItaYouReinemberIGotYouBzokenConstellationsWy(hmTyoHands(feat.BenHarper)NoOther口曲NverKnow匚TyingShami-eGoingToBeFriendsIfICouldSanjpeGirlBubbleToesConstellationsBelleStapleItToaetherSituationsGoOnThatYouTh