計算機基礎(chǔ)數(shù)據(jù)庫技術(shù)日期:目錄CATALOGUE02.關(guān)系型數(shù)據(jù)庫04.數(shù)據(jù)庫設(shè)計流程05.非關(guān)系型數(shù)據(jù)庫01.數(shù)據(jù)庫系統(tǒng)概述03.SQL語言基礎(chǔ)06.數(shù)據(jù)庫安全與管理數(shù)據(jù)庫系統(tǒng)概述01基本概念與定義數(shù)據(jù)庫系統(tǒng)（DBS）的組成數(shù)據(jù)庫系統(tǒng)是由數(shù)據(jù)庫（存儲數(shù)據(jù)的集合）、數(shù)據(jù)庫管理系統(tǒng)（DBMS，管理數(shù)據(jù)的軟件）及相關(guān)應(yīng)用程序構(gòu)成的完整系統(tǒng)，旨在高效存儲、檢索和管理數(shù)據(jù)。數(shù)據(jù)庫系統(tǒng)的核心目標確保數(shù)據(jù)的獨立性（邏輯與物理分離）、完整性（數(shù)據(jù)準確性）、安全性（訪問控制）和共享性（多用戶并發(fā)訪問）。數(shù)據(jù)庫與文件系統(tǒng)的區(qū)別數(shù)據(jù)庫系統(tǒng)通過結(jié)構(gòu)化查詢語言（SQL）實現(xiàn)復雜數(shù)據(jù)操作，而文件系統(tǒng)缺乏統(tǒng)一管理機制，易導致數(shù)據(jù)冗余和不一致。數(shù)據(jù)庫管理系統(tǒng)（DBMS）功能提供數(shù)據(jù)定義語言（DDL）用于創(chuàng)建、修改和刪除數(shù)據(jù)庫對象（如表、索引），并定義數(shù)據(jù)約束（如主鍵、外鍵）。數(shù)據(jù)定義功能通過數(shù)據(jù)操縱語言（DML）支持數(shù)據(jù)的增刪改查（CRUD）操作，如SQL中的`SELECT`、`INSERT`等語句。數(shù)據(jù)操縱功能提供數(shù)據(jù)字典（元數(shù)據(jù)管理）、性能優(yōu)化（查詢計劃）和用戶權(quán)限管理（角色與授權(quán)）。數(shù)據(jù)服務(wù)功能010203數(shù)據(jù)模型分類以樹形結(jié)構(gòu)組織數(shù)據(jù)，通過父子關(guān)系表示實體間聯(lián)系（如IBM的IMS系統(tǒng)），但靈活性差，難以處理多對多關(guān)系。層次模型允許節(jié)點間多對多關(guān)系（如CODASYLDBTG模型），復雜度高且維護困難，已逐漸被關(guān)系模型取代。包括鍵值存儲（Redis）、文檔型（MongoDB）、列族（HBase）和圖數(shù)據(jù)庫（Neo4j），適用于高并發(fā)、非結(jié)構(gòu)化或分布式場景。網(wǎng)狀模型基于二維表（關(guān)系）和集合論，通過主鍵和外鍵建立關(guān)聯(lián)（如Oracle、MySQL），支持標準化（范式理論）和高效查詢（SQL）。關(guān)系模型01020403非關(guān)系模型（NoSQL）關(guān)系型數(shù)據(jù)庫02表結(jié)構(gòu)與關(guān)系模式二維表結(jié)構(gòu)關(guān)系型數(shù)據(jù)庫的核心是二維表，由行（記錄）和列（字段）組成，每列具有明確的數(shù)據(jù)類型（如整數(shù)、字符串、日期等），表結(jié)構(gòu)需預先定義以確保數(shù)據(jù)的一致性和完整性。01關(guān)系模式定義關(guān)系模式是表的邏輯設(shè)計，包括表名、屬性名、數(shù)據(jù)類型及約束條件，例如`Student(StudentIDINT,NameVARCHAR(50),AgeINT)`，通過模式描述實體及其屬性間的關(guān)聯(lián)。元組與屬性表中的每一行稱為元組（Tuple），代表一個實體實例；每一列稱為屬性（Attribute），描述實體的特征，如`StudentID`唯一標識學生實體。域約束與空值規(guī)則每個屬性的取值范圍由域（Domain）約束限定，如`Age`必須為正整數(shù)；空值（NULL）規(guī)則定義屬性是否允許缺失值，影響數(shù)據(jù)完整性。020304主鍵與外鍵約束主鍵（PrimaryKey）唯一標識表中每條記錄的字段或字段組合，如`StudentID`，具有非空且唯一的特性，確保實體可區(qū)分性，是數(shù)據(jù)檢索和關(guān)聯(lián)的基礎(chǔ)。外鍵（ForeignKey）建立表間關(guān)聯(lián)的字段，引用另一表的主鍵，如`CourseEnrollment`表中的`StudentID`引用`Student`表的主鍵，實現(xiàn)參照完整性，防止孤立記錄。級聯(lián)操作外鍵約束可配置級聯(lián)更新（CASCADEUPDATE）或刪除（CASCADEDELETE），當主表數(shù)據(jù)變更時自動同步關(guān)聯(lián)表數(shù)據(jù)，維護數(shù)據(jù)一致性。復合鍵與唯一約束主鍵可由多列組成（復合鍵），如`OrderDetails`表中的`OrderID+ProductID`；唯一約束（UNIQUE）允許非主鍵字段值唯一，如身份證號。消除重復組，確保每列原子性（不可再分），如將`Hobbies`字段拆分為多行存儲，避免逗號分隔的多個值，保證數(shù)據(jù)最小單元。第一范式（1NF）在2NF基礎(chǔ)上消除傳遞依賴，非主鍵字段間不能存在依賴關(guān)系，如`Employee`表中`DepartmentName`應(yīng)通過`DepartmentID`關(guān)聯(lián)而非直接存儲。第三范式（3NF）在1NF基礎(chǔ)上消除部分函數(shù)依賴，非主鍵字段需完全依賴主鍵，例如訂單明細表中`ProductName`應(yīng)依賴`ProductID`而非`OrderID`。第二范式（2NF）010302規(guī)范化設(shè)計原則巴斯-科德范式（BCNF）進一步消除主鍵對非主鍵字段的依賴；反規(guī)范化（Denormalization）為提高查詢性能，允許適度冗余，需權(quán)衡讀寫效率與一致性。BCNF與反規(guī)范化04SQL語言基礎(chǔ)03數(shù)據(jù)查詢（SELECT）基礎(chǔ)查詢語法SELECT語句用于從數(shù)據(jù)庫中檢索數(shù)據(jù)，基本語法為`SELECTcolumn1,column2FROMtable_name`，支持使用`WHERE`子句進行條件過濾，例如`SELECT*FROMemployeesWHEREsalary>50000`。01聚合函數(shù)與分組SQL提供COUNT、SUM、AVG等聚合函數(shù)，結(jié)合`GROUPBY`子句可對數(shù)據(jù)進行分組統(tǒng)計，例如`SELECTdepartment,AVG(salary)FROMemployeesGROUPBYdepartment`。02多表連接查詢通過JOIN操作（如INNERJOIN、LEFTJOIN）關(guān)聯(lián)多個表，例如`SELECTorders.order_id,FROMordersJOINcustomersONorders.customer_id=customers.id`。03子查詢與嵌套支持在SELECT中嵌套子查詢，例如`SELECTnameFROMemployeesWHEREdepartment_idIN(SELECTidFROMdepartmentsWHERElocation='NewYork')`。04用于向表中添加新記錄，語法為`INSERTINTOtable_name(column1,column2)VALUES(value1,value2)`，支持批量插入，例如`INSERTINTOproducts(name,price)VALUES('Laptop',999),('Phone',699)`。插入數(shù)據(jù)（INSERT）刪除符合條件的記錄，如`DELETEFROMordersWHEREorder_date<'日期:'`，若需清空表可使用`TRUNCATETABLEtable_name`（不可回滾）。刪除數(shù)據(jù)（DELETE）修改表中現(xiàn)有記錄，需指定條件避免全表更新，例如`UPDATEemployeesSETsalary=salary*1.1WHEREperformance_rating>8`。更新數(shù)據(jù)（UPDATE）010302數(shù)據(jù)操作（INSERT/UPDATE/DELETE）通過`BEGINTRANSACTION`、`COMMIT`和`ROLLBACK`確保數(shù)據(jù)操作的原子性，例如批量操作失敗時回滾到初始狀態(tài)。事務(wù)控制04表與索引管理使用`CREATETABLE`定義表結(jié)構(gòu)，指定字段名、數(shù)據(jù)類型及約束（如PRIMARYKEY、NOTNULL），例如`CREATETABLEusers(idINTPRIMARYKEY,usernameVARCHAR(50)UNIQUE)`。通過`CREATEINDEX`創(chuàng)建索引加速檢索，例如`CREATEINDEXidx_emailONcustomers(email)`，但需權(quán)衡寫入性能與查詢效率。`ALTERTABLE`支持添加/刪除列（如`ALTERTABLEemployeesADDCOLUMNbonusDECIMAL(10,2)`）或修改約束，`DROPTABLE`用于刪除整個表結(jié)構(gòu)。對大表可按范圍或哈希分區(qū)（如`PARTITIONBYRANGE(year)`），提升查詢性能并簡化數(shù)據(jù)管理。表結(jié)構(gòu)設(shè)計索引優(yōu)化查詢表修改與維護分區(qū)表與分片數(shù)據(jù)庫設(shè)計流程04需求分析與概念設(shè)計用戶需求調(diào)研通過訪談、問卷調(diào)查等方式收集業(yè)務(wù)需求，明確數(shù)據(jù)范圍、操作頻率及性能指標，形成需求規(guī)格說明書。需重點關(guān)注實體、屬性和關(guān)系的定義，例如電商系統(tǒng)中的“用戶”“訂單”“商品”等核心實體及其交互邏輯。概念模型構(gòu)建（E-R圖設(shè)計）數(shù)據(jù)字典編制基于需求分析結(jié)果繪制實體-聯(lián)系圖（E-R圖），標識實體類型（矩形）、屬性（橢圓）和關(guān)系（菱形）。例如，設(shè)計學籍管理系統(tǒng)時需明確“學生”與“課程”之間的“選課”多對多關(guān)系，并標注聯(lián)系的基數(shù)約束。詳細定義每個實體的屬性名稱、數(shù)據(jù)類型、約束條件（如主鍵、非空）及業(yè)務(wù)含義，例如“員工表”中“工號”字段需定義為CHAR(10)且唯一，確保數(shù)據(jù)規(guī)范性和一致性。123邏輯模型轉(zhuǎn)換E-R模型到關(guān)系模式的映射將E-R圖中的實體和聯(lián)系轉(zhuǎn)換為關(guān)系表。例如，多對多聯(lián)系“學生-課程”需拆解為三個表（學生表、課程表、選課關(guān)聯(lián)表），其中選課表包含學生ID和課程ID作為聯(lián)合主鍵及外鍵約束。冗余與性能權(quán)衡在嚴格范式化基礎(chǔ)上，針對高頻查詢場景適當引入冗余字段（如訂單表中保留“客戶名稱”），減少表連接操作，提升查詢效率但需維護數(shù)據(jù)一致性。范式化處理通過1NF（消除重復組）、2NF（消除部分依賴）、3NF（消除傳遞依賴）優(yōu)化表結(jié)構(gòu)。例如，若“訂單表”包含“客戶地址”而非“客戶ID”，則需拆分為“訂單表”和“客戶表”以符合3NF。物理存儲優(yōu)化存儲參數(shù)調(diào)優(yōu)配置數(shù)據(jù)庫文件的初始大小、自動增長策略及文件組分布，例如將事務(wù)日志文件（LDF）與數(shù)據(jù)文件（MDF）分離到不同磁盤，利用RAID10提升I/O并行度，減少磁盤爭用。分區(qū)與分表技術(shù)對大表（如日志表）按時間范圍或哈希值分區(qū)存儲，例如按月分區(qū)日志數(shù)據(jù)，結(jié)合SQLServer的分區(qū)函數(shù)（PARTITIONBYRANGE）實現(xiàn)高效的數(shù)據(jù)歸檔和查詢。索引策略設(shè)計根據(jù)查詢頻率和字段選擇性創(chuàng)建索引，例如對“訂單表”的“下單時間”字段建立B+樹索引以加速時間范圍查詢，同時避免對頻繁更新的字段過度索引導致寫入性能下降。非關(guān)系型數(shù)據(jù)庫05NoSQL核心類型以鍵值對形式存儲數(shù)據(jù)，具有極高的讀寫性能和可擴展性，適用于緩存、會話存儲等場景。典型代表包括Redis、DynamoDB等，支持高并發(fā)和分布式架構(gòu)。以半結(jié)構(gòu)化文檔（如JSON、XML）存儲數(shù)據(jù)，支持嵌套結(jié)構(gòu)和靈活的數(shù)據(jù)模型，適用于內(nèi)容管理系統(tǒng)和實時分析。MongoDB、Couchbase是其主要代表，提供豐富的查詢和索引功能。按列族組織數(shù)據(jù)，適合處理海量數(shù)據(jù)的分布式存儲與查詢，如時間序列數(shù)據(jù)和大規(guī)模日志分析。HBase和Cassandra是典型系統(tǒng)，具備高可用性和水平擴展能力。以節(jié)點、邊和屬性存儲關(guān)系數(shù)據(jù)，專長于復雜關(guān)系網(wǎng)絡(luò)的高效遍歷，如社交網(wǎng)絡(luò)推薦和欺詐檢測。Neo4j和ArangoDB支持原生圖處理算法和實時查詢。鍵值存儲數(shù)據(jù)庫（Key-ValueStore）文檔數(shù)據(jù)庫（DocumentDatabase）列族數(shù)據(jù)庫（Column-FamilyStore）圖數(shù)據(jù)庫（GraphDatabase）文檔數(shù)據(jù)庫特性靈活的數(shù)據(jù)模型允許動態(tài)添加字段和嵌套文檔，無需預定義嚴格表結(jié)構(gòu)，適應(yīng)業(yè)務(wù)需求快速變化。例如，MongoDB的BSON格式支持數(shù)組、子文檔等復雜數(shù)據(jù)類型。高性能索引機制支持多級索引（如復合索引、全文索引、地理空間索引），顯著加速查詢效率。部分系統(tǒng)還提供TTL索引實現(xiàn)數(shù)據(jù)自動過期。分布式架構(gòu)支持通過分片（Sharding）技術(shù)實現(xiàn)水平擴展，配合副本集（ReplicaSet）保障數(shù)據(jù)高可用性，滿足PB級數(shù)據(jù)存儲需求。內(nèi)置聚合框架提供MapReduce、聚合管道等高級分析功能，可直接在數(shù)據(jù)庫層完成數(shù)據(jù)轉(zhuǎn)換與統(tǒng)計，減少應(yīng)用層計算壓力。鍵值存儲應(yīng)用場景存儲用戶會話信息（如登錄狀態(tài)、購物車數(shù)據(jù)），實現(xiàn)無狀態(tài)服務(wù)架構(gòu)。DynamoDB通過自動分區(qū)和SSD存儲保障高吞吐量，支持千萬級并發(fā)會話。會話狀態(tài)管理

0104

03

02

通過SETNX等指令實現(xiàn)跨進程互斥鎖，解決集群環(huán)境下的資源競爭問題。ETCD等系統(tǒng)還提供租約機制確保鎖的安全性。分布式鎖服務(wù)作為應(yīng)用與數(shù)據(jù)庫間的緩沖層，顯著降低后端負載。Redis支持內(nèi)存存儲與持久化，提供亞毫秒級響應(yīng)，適用于電商秒殺、熱點數(shù)據(jù)緩存等場景。高速緩存系統(tǒng)利用原子操作（INCR/DECR）實現(xiàn)點贊數(shù)、點擊量統(tǒng)計。Redis的有序集合（ZSET）可高效維護動態(tài)排名數(shù)據(jù)。實時排行榜與計數(shù)器數(shù)據(jù)庫安全與管理06訪問控制機制基于角色的訪問控制（RBAC）通過定義不同角色（如管理員、普通用戶、審計員）及其對應(yīng)的權(quán)限集合，實現(xiàn)細粒度的數(shù)據(jù)訪問控制，降低權(quán)限管理復雜度。數(shù)據(jù)加密技術(shù)采用透明數(shù)據(jù)加密（TDE）或列級加密技術(shù)保護敏感數(shù)據(jù)，確保即使數(shù)據(jù)庫文件被非法獲取，攻擊者也無法直接讀取明文信息。多因素認證體系結(jié)合生物識別、動態(tài)令牌和傳統(tǒng)密碼認證方式，構(gòu)建強身份