匯報(bào)人：XX2024-01-10Python文件和數(shù)據(jù)格式化編程實(shí)操教程目錄Python基礎(chǔ)與文件操作數(shù)據(jù)格式化處理文件內(nèi)容提取與整理數(shù)據(jù)庫交互操作數(shù)據(jù)可視化展示綜合案例：批量處理文件和數(shù)據(jù)清洗01Python基礎(chǔ)與文件操作高級(jí)編程語言Python是一種解釋型、面向?qū)ο?、?dòng)態(tài)數(shù)據(jù)類型的高級(jí)程序設(shè)計(jì)語言。簡單易學(xué)Python語法簡潔清晰，易于學(xué)習(xí)，支持多種編程范式。廣泛應(yīng)用Python在數(shù)據(jù)分析、人工智能、Web開發(fā)等領(lǐng)域有廣泛應(yīng)用。Python語言簡介使用賦值語句定義變量，如`x=10`。變量定義Python支持多種數(shù)據(jù)類型，包括整數(shù)、浮點(diǎn)數(shù)、字符串、列表、元組等。數(shù)據(jù)類型Python提供豐富的運(yùn)算符，如算術(shù)運(yùn)算符、比較運(yùn)算符、邏輯運(yùn)算符等。運(yùn)算符變量、數(shù)據(jù)類型與運(yùn)算符

控制流語句條件語句使用`if`、`elif`和`else`關(guān)鍵字實(shí)現(xiàn)條件判斷。循環(huán)語句使用`for`和`while`循環(huán)結(jié)構(gòu)實(shí)現(xiàn)重復(fù)執(zhí)行代碼塊。異常處理使用`try`和`except`關(guān)鍵字捕獲和處理異常。函數(shù)定義使用`def`關(guān)鍵字定義函數(shù)，指定函數(shù)名和參數(shù)列表。函數(shù)調(diào)用通過函數(shù)名和參數(shù)列表調(diào)用函數(shù)，執(zhí)行函數(shù)體中的代碼。返回值使用`return`語句返回函數(shù)執(zhí)行結(jié)果。函數(shù)定義與調(diào)用使用`open()`函數(shù)打開文件，指定文件名和打開模式（如讀取、寫入等）。打開文件使用文件對(duì)象的`read()`、`readline()`或`readlines()`方法讀取文件內(nèi)容。讀取文件使用文件對(duì)象的`write()`方法寫入文件內(nèi)容。寫入文件使用文件對(duì)象的`close()`方法關(guān)閉文件。關(guān)閉文件文件讀寫操作02數(shù)據(jù)格式化處理字符串格式化方法在Python3.6及以上版本中，可以使用f-string進(jìn)行字符串格式化，例如`name="Alice";f"Hello,{name}!"`。f-string格式化使用`%`操作符進(jìn)行格式化，例如`"Hello,%s!"%name`。舊式字符串格式化使用大括號(hào)`{}`作為占位符，通過`str.format()`方法進(jìn)行格式化，例如`"Hello,{}!".format(name)`。str.format()方法列表、元組和字典應(yīng)用用于存儲(chǔ)有序的元素集合，支持添加、刪除和修改操作，例如`my_list=[1,2,3]`。元組（Tuple）用于存儲(chǔ)不可變的有序元素集合，通常用于表示一組相關(guān)的數(shù)據(jù)，例如`my_tuple=(1,2,3)`。字典（Dictionary）用于存儲(chǔ)鍵值對(duì)（key-value）類型的數(shù)據(jù)，支持根據(jù)鍵快速查找對(duì)應(yīng)的值，例如`my_dict={'name':'Alice','age':25}`。列表（List）正則表達(dá)式簡介正則表達(dá)式是一種用于匹配字符串模式的強(qiáng)大工具，可以用于數(shù)據(jù)清洗、文本挖掘等場景。re模塊Python標(biāo)準(zhǔn)庫中的re模塊提供了正則表達(dá)式的相關(guān)功能，例如`importre;pattern=pile(r'd+')`。正則表達(dá)式應(yīng)用示例使用正則表達(dá)式進(jìn)行電話號(hào)碼、郵箱地址等復(fù)雜文本模式的匹配和提取。正則表達(dá)式在數(shù)據(jù)處理中應(yīng)用123JSON（JavaScriptObjectNotation）是一種輕量級(jí)的數(shù)據(jù)交換格式，易于閱讀和編寫。JSON簡介Python標(biāo)準(zhǔn)庫中的json模塊提供了JSON數(shù)據(jù)的編碼和解碼功能，例如`importjson;data=json.loads(json_string)`。json模塊將Python對(duì)象轉(zhuǎn)換為JSON字符串，或?qū)SON字符串解析為Python對(duì)象，實(shí)現(xiàn)數(shù)據(jù)的序列化和反序列化。JSON數(shù)據(jù)處理示例JSON數(shù)據(jù)處理03文件內(nèi)容提取與整理讀取文本文件01使用Python內(nèi)置函數(shù)`open()`打開文本文件，并指定文件路徑和打開模式（如讀取模式"r"）。逐行讀取文件內(nèi)容02通過循環(huán)遍歷文件對(duì)象，使用`readline()`方法逐行讀取文件內(nèi)容。提取特定信息03利用正則表達(dá)式或字符串處理方法，從每行文本中提取所需的信息。文本文件內(nèi)容提取方法使用Python的`csv`模塊，通過創(chuàng)建`csv.reader()`對(duì)象來讀取CSV文件內(nèi)容。讀取CSV文件同樣使用`csv`模塊，創(chuàng)建`csv.writer()`對(duì)象，并將數(shù)據(jù)按照CSV格式寫入文件。寫入CSV文件對(duì)讀取的CSV數(shù)據(jù)進(jìn)行清洗、轉(zhuǎn)換和整理，以滿足后續(xù)分析或處理的需求。數(shù)據(jù)處理CSV文件讀寫及數(shù)據(jù)處理寫入Excel文件利用`openpyxl`或`pandas`庫提供的功能，將數(shù)據(jù)按照Excel格式寫入文件。數(shù)據(jù)處理對(duì)讀取的Excel數(shù)據(jù)進(jìn)行清洗、篩選、排序等操作，以便進(jìn)行進(jìn)一步的分析或可視化。讀取Excel文件使用Python的`openpyxl`或`pandas`庫，可以方便地讀取Excel文件中的數(shù)據(jù)。Excel文件讀寫及數(shù)據(jù)處理XML/HTML解析使用Python的`xml.etree.ElementTree`或`BeautifulSoup`庫，可以解析XML或HTML文檔，提取其中的數(shù)據(jù)。網(wǎng)頁爬蟲利用Python的`requests`庫發(fā)送HTTP請(qǐng)求獲取網(wǎng)頁內(nèi)容，再結(jié)合解析庫提取所需數(shù)據(jù)。同時(shí)，需要注意遵守網(wǎng)站的使用協(xié)議和法律法規(guī)。數(shù)據(jù)處理對(duì)爬取的數(shù)據(jù)進(jìn)行清洗、整理和存儲(chǔ)，以便后續(xù)分析和應(yīng)用。010203XML/HTML解析與網(wǎng)頁爬蟲04數(shù)據(jù)庫交互操作關(guān)系型數(shù)據(jù)庫SQL語言基礎(chǔ)常用SQL語句關(guān)系型數(shù)據(jù)庫簡介及SQL語言基礎(chǔ)一種基于關(guān)系模型的數(shù)據(jù)庫，使用表格存儲(chǔ)數(shù)據(jù)，具有數(shù)據(jù)結(jié)構(gòu)化、數(shù)據(jù)獨(dú)立性、數(shù)據(jù)完整性等特點(diǎn)。SQL（StructuredQueryLanguage）是用于管理關(guān)系型數(shù)據(jù)庫的標(biāo)準(zhǔn)語言，包括數(shù)據(jù)查詢、數(shù)據(jù)定義、數(shù)據(jù)操縱和數(shù)據(jù)控制等功能。SELECT（查詢）、INSERT（插入）、UPDATE（更新）、DELETE（刪除）等。獲取查詢結(jié)果使用fetchall()、fetchone()或fetchmany()方法獲取查詢結(jié)果。安裝MySQL驅(qū)動(dòng)在Python中連接MySQL數(shù)據(jù)庫需要使用mysql-connector-python驅(qū)動(dòng)，可以通過pip命令進(jìn)行安裝。連接MySQL數(shù)據(jù)庫使用mysql.connector.connect()函數(shù)連接MySQL數(shù)據(jù)庫，需要指定數(shù)據(jù)庫的主機(jī)名、端口號(hào)、用戶名、密碼和數(shù)據(jù)庫名稱等參數(shù)。執(zhí)行SQL語句使用cursor()方法創(chuàng)建游標(biāo)對(duì)象，然后調(diào)用execute()方法執(zhí)行SQL語句。Python連接MySQL數(shù)據(jù)庫實(shí)例在Python中連接Oracle數(shù)據(jù)庫需要使用cx_Oracle驅(qū)動(dòng)，可以通過pip命令進(jìn)行安裝。安裝Oracle驅(qū)動(dòng)連接Oracle數(shù)據(jù)庫執(zhí)行SQL語句獲取查詢結(jié)果使用cx_Oracle.connect()函數(shù)連接Oracle數(shù)據(jù)庫，需要指定數(shù)據(jù)庫的用戶名、密碼和TNS名稱等參數(shù)。與MySQL類似，使用cursor()方法創(chuàng)建游標(biāo)對(duì)象，然后調(diào)用execute()方法執(zhí)行SQL語句。同樣使用fetchall()、fetchone()或fetchmany()方法獲取查詢結(jié)果。Python連接Oracle數(shù)據(jù)庫實(shí)例010203非關(guān)系型數(shù)據(jù)庫一種非表格型的數(shù)據(jù)庫，以鍵值對(duì)、文檔、列存儲(chǔ)或圖形等形式存儲(chǔ)數(shù)據(jù)，具有靈活的數(shù)據(jù)模型、高可擴(kuò)展性和高性能等特點(diǎn)。NoSQL應(yīng)用NoSQL（NotOnlySQL）是指非關(guān)系型數(shù)據(jù)庫的統(tǒng)稱，適用于大數(shù)據(jù)、實(shí)時(shí)應(yīng)用、社交網(wǎng)絡(luò)等場景。常見的NoSQL數(shù)據(jù)庫有MongoDB、Redis、Cassandra等。Python與NoSQL數(shù)據(jù)庫交互不同的NoSQL數(shù)據(jù)庫有不同的Python驅(qū)動(dòng)和API接口，例如PyMongo用于連接MongoDB數(shù)據(jù)庫，redis-py用于連接Redis數(shù)據(jù)庫等。通過相應(yīng)的驅(qū)動(dòng)和API接口，可以實(shí)現(xiàn)Python與NoSQL數(shù)據(jù)庫的交互操作。非關(guān)系型數(shù)據(jù)庫簡介及NoSQL應(yīng)用05數(shù)據(jù)可視化展示ABCDMatplotlib庫使用教程安裝Matplotlib庫通過pip或conda等包管理器安裝Matplotlib庫。自定義圖形樣式通過設(shè)置線條顏色、線型、標(biāo)記樣式等參數(shù)自定義圖形的外觀。繪制基本圖形使用Matplotlib庫中的pyplot模塊繪制折線圖、散點(diǎn)圖、柱狀圖等基本圖形。添加標(biāo)簽和標(biāo)題為圖形添加x軸和y軸標(biāo)簽，以及標(biāo)題，提高圖形的可讀性。安裝Seaborn庫通過pip或conda等包管理器安裝Seaborn庫。繪制統(tǒng)計(jì)圖形使用Seaborn庫中的函數(shù)繪制直方圖、箱線圖、熱力圖等統(tǒng)計(jì)圖形。自定義圖形樣式通過設(shè)置顏色主題、調(diào)整圖形參數(shù)等方式自定義圖形的外觀。結(jié)合Pandas數(shù)據(jù)處理結(jié)合Pandas庫對(duì)數(shù)據(jù)進(jìn)行處理和分析，然后使用Seaborn庫進(jìn)行可視化展示。Seaborn庫使用教程通過pip或conda等包管理器安裝Plotly庫。安裝Plotly庫使用Plotly庫中的函數(shù)繪制折線圖、散點(diǎn)圖、柱狀圖等交互式圖形。繪制交互式圖形通過設(shè)置顏色、線型、標(biāo)記樣式等參數(shù)自定義圖形的外觀。自定義圖形樣式為圖形添加鼠標(biāo)懸停提示、拖拽、縮放等交互功能，提高用戶體驗(yàn)。添加交互功能Plotly庫使用教程Bokeh庫使用教程安裝Bokeh庫通過pip或conda等包管理器安裝Bokeh庫。繪制交互式圖形使用Bokeh庫中的函數(shù)繪制折線圖、散點(diǎn)圖、柱狀圖等交互式圖形。自定義圖形樣式通過設(shè)置顏色、線型、標(biāo)記樣式等參數(shù)自定義圖形的外觀。結(jié)合JupyterNotebook使用在JupyterNotebook中使用Bokeh庫進(jìn)行交互式數(shù)據(jù)可視化展示，方便用戶進(jìn)行數(shù)據(jù)分析和探索。06綜合案例：批量處理文件和數(shù)據(jù)清洗批量重命名文件使用Python的`os`模塊，可以編寫腳本來批量重命名指定目錄下的文件。通過遍歷目錄中的文件列表，對(duì)每個(gè)文件名進(jìn)行字符串操作，然后使用`os.rename()`方法來實(shí)現(xiàn)重命名。同樣使用`os`模塊，可以編寫腳本來批量移動(dòng)文件。通過指定源目錄和目標(biāo)目錄，遍歷源目錄中的文件列表，使用`shutil.move()`方法將文件從源目錄移動(dòng)到目標(biāo)目錄。使用`os`模塊的`os.remove()`或`os.unlink()`方法可以刪除指定文件。通過遍歷目錄中的文件列表，對(duì)每個(gè)需要?jiǎng)h除的文件調(diào)用這些方法即可實(shí)現(xiàn)批量刪除。批量移動(dòng)文件批量刪除文件批量重命名、移動(dòng)和刪除文件對(duì)于文本文件，可以使用Python的內(nèi)置文件操作函數(shù)來讀取和修改內(nèi)容。通過打開文件、讀取內(nèi)容、進(jìn)行修改、然后寫回文件，可以實(shí)現(xiàn)批量修改文件內(nèi)容。對(duì)于二進(jìn)制文件或其他格式的文件，可能需要使用特定的庫或工具來進(jìn)行處理。批量修改文件內(nèi)容根據(jù)需要將一種格式的文件轉(zhuǎn)換為另一種格式。例如，將CSV文件轉(zhuǎn)換為JSON格式，可以使用Python的`csv`模塊讀取CSV文件內(nèi)容，然后使用`json`模塊將數(shù)據(jù)轉(zhuǎn)換為JSON格式并寫入新的文件。格式轉(zhuǎn)換批量修改文件內(nèi)容或格式轉(zhuǎn)換數(shù)據(jù)匯總從多個(gè)數(shù)據(jù)源（如數(shù)據(jù)庫、API、其他文件等）獲取數(shù)據(jù)，并將其匯總到一個(gè)統(tǒng)一的數(shù)據(jù)結(jié)構(gòu)中（如列表、字典或PandasDataFrame）?？梢允褂肞ython的各種庫（如`requests`用于API調(diào)用，`pandas`用于數(shù)據(jù)處理等）來實(shí)現(xiàn)數(shù)據(jù)的獲取和匯總。數(shù)據(jù)清洗對(duì)匯總的數(shù)據(jù)進(jìn)行清洗和處理，包括去除重復(fù)數(shù)據(jù)、處理缺失值、轉(zhuǎn)換數(shù)據(jù)類型、篩選特定條件的數(shù)據(jù)等。可以使用Python的`pandas`庫來進(jìn)行高效的數(shù)據(jù)清洗和處理。從多個(gè)源匯總并清洗數(shù)據(jù)導(dǎo)出到CSV文件使用Pandas庫的`to_csv()`方法，可