智能制造中的工業(yè)大數(shù)據(jù)采集技術(shù)研究與數(shù)據(jù)質(zhì)量保障研究答辯_第1頁(yè)
智能制造中的工業(yè)大數(shù)據(jù)采集技術(shù)研究與數(shù)據(jù)質(zhì)量保障研究答辯_第2頁(yè)
智能制造中的工業(yè)大數(shù)據(jù)采集技術(shù)研究與數(shù)據(jù)質(zhì)量保障研究答辯_第3頁(yè)
智能制造中的工業(yè)大數(shù)據(jù)采集技術(shù)研究與數(shù)據(jù)質(zhì)量保障研究答辯_第4頁(yè)
智能制造中的工業(yè)大數(shù)據(jù)采集技術(shù)研究與數(shù)據(jù)質(zhì)量保障研究答辯_第5頁(yè)
已閱讀5頁(yè),還剩27頁(yè)未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

第一章智能制造背景下的工業(yè)大數(shù)據(jù)采集技術(shù)概述第二章異構(gòu)工業(yè)大數(shù)據(jù)采集的技術(shù)路徑第三章動(dòng)態(tài)環(huán)境下的工業(yè)大數(shù)據(jù)采集策略第四章邊緣計(jì)算驅(qū)動(dòng)的工業(yè)大數(shù)據(jù)采集優(yōu)化第五章工業(yè)大數(shù)據(jù)采集的數(shù)據(jù)質(zhì)量保障研究第六章基于機(jī)器學(xué)習(xí)的動(dòng)態(tài)數(shù)據(jù)質(zhì)量保障技術(shù)01第一章智能制造背景下的工業(yè)大數(shù)據(jù)采集技術(shù)概述智能制造與工業(yè)大數(shù)據(jù)的興起智能制造作為工業(yè)4.0的核心組成部分,正推動(dòng)全球制造業(yè)向數(shù)字化、網(wǎng)絡(luò)化、智能化轉(zhuǎn)型。根據(jù)國(guó)際能源署(IEA)2023年的報(bào)告,全球制造業(yè)數(shù)字化投入預(yù)計(jì)將在2025年達(dá)到1.2萬(wàn)億美元,其中工業(yè)大數(shù)據(jù)采集技術(shù)是智能制造的關(guān)鍵支撐。以德國(guó)“工業(yè)4.0”計(jì)劃為例,2022年數(shù)據(jù)顯示,德國(guó)制造業(yè)中有超過(guò)60%的企業(yè)已經(jīng)開始應(yīng)用工業(yè)物聯(lián)網(wǎng)技術(shù),這些企業(yè)通過(guò)在生產(chǎn)線部署各類傳感器,實(shí)時(shí)采集生產(chǎn)過(guò)程中的數(shù)據(jù),為工藝優(yōu)化和設(shè)備管理提供支持。在數(shù)據(jù)采集方面,某汽車制造廠通過(guò)在裝配線上部署200個(gè)傳感器,實(shí)時(shí)采集每臺(tái)汽車的1000個(gè)數(shù)據(jù)點(diǎn)(如溫度、振動(dòng)頻率、電流),年產(chǎn)生數(shù)據(jù)量達(dá)5TB,這些數(shù)據(jù)為工藝優(yōu)化和故障預(yù)測(cè)提供了豐富的素材。然而,傳統(tǒng)采集方式存在明顯的局限性,例如延遲高(平均采集間隔為10秒)、精度低(誤差達(dá)5%),難以滿足智能制造對(duì)實(shí)時(shí)性(要求毫秒級(jí)采集)和準(zhǔn)確性的需求。此外,隨著設(shè)備自動(dòng)化程度的提高,工業(yè)大數(shù)據(jù)的采集量和種類也在不斷增加,這對(duì)數(shù)據(jù)采集技術(shù)提出了更高的要求。因此,本章將深入探討智能制造背景下的工業(yè)大數(shù)據(jù)采集技術(shù),分析其發(fā)展趨勢(shì)和關(guān)鍵技術(shù),為后續(xù)章節(jié)的研究奠定基礎(chǔ)。工業(yè)大數(shù)據(jù)采集的關(guān)鍵技術(shù)分類傳感器技術(shù)包括振動(dòng)傳感器、溫度傳感器、壓力傳感器等,用于采集物理量數(shù)據(jù)。邊緣計(jì)算通過(guò)邊緣節(jié)點(diǎn)進(jìn)行數(shù)據(jù)處理,減少數(shù)據(jù)傳輸延遲和帶寬壓力。網(wǎng)絡(luò)協(xié)議包括Modbus、OPCUA、MQTT等,用于設(shè)備間數(shù)據(jù)通信。數(shù)據(jù)清洗對(duì)采集到的數(shù)據(jù)進(jìn)行預(yù)處理,去除噪聲和異常值。數(shù)據(jù)存儲(chǔ)使用時(shí)序數(shù)據(jù)庫(kù)或分布式存儲(chǔ)系統(tǒng)進(jìn)行數(shù)據(jù)存儲(chǔ)。工業(yè)大數(shù)據(jù)采集的典型應(yīng)用場(chǎng)景生產(chǎn)優(yōu)化場(chǎng)景通過(guò)采集注塑機(jī)壓力數(shù)據(jù),優(yōu)化生產(chǎn)工藝,提高產(chǎn)品質(zhì)量。預(yù)測(cè)性維護(hù)場(chǎng)景采集設(shè)備振動(dòng)數(shù)據(jù),預(yù)測(cè)設(shè)備故障,減少停機(jī)時(shí)間。供應(yīng)鏈協(xié)同場(chǎng)景采集物流車輛位置數(shù)據(jù),實(shí)現(xiàn)供應(yīng)鏈可視化。智能質(zhì)檢場(chǎng)景通過(guò)圖像識(shí)別技術(shù),自動(dòng)檢測(cè)產(chǎn)品缺陷。工業(yè)大數(shù)據(jù)采集技術(shù)對(duì)比技術(shù)參數(shù)采集頻率:高(毫秒級(jí))vs低(秒級(jí))數(shù)據(jù)精度:高(±0.1%)vs低(±5%)成本:高vs低適用場(chǎng)景:實(shí)時(shí)控制vs低價(jià)值數(shù)據(jù)采集技術(shù)優(yōu)缺點(diǎn)高頻率采集:實(shí)時(shí)性強(qiáng),但成本高低頻率采集:成本低,但實(shí)時(shí)性差傳感器技術(shù):精度高,但易受環(huán)境干擾邊緣計(jì)算:減少延遲,但需額外硬件投入02第二章異構(gòu)工業(yè)大數(shù)據(jù)采集的技術(shù)路徑異構(gòu)數(shù)據(jù)的來(lái)源與挑戰(zhàn)工業(yè)大數(shù)據(jù)的來(lái)源多樣,包括結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。這些數(shù)據(jù)在采集過(guò)程中面臨著諸多挑戰(zhàn),主要包括數(shù)據(jù)格式不統(tǒng)一、數(shù)據(jù)質(zhì)量參差不齊和數(shù)據(jù)傳輸效率低等問(wèn)題。以某大型制造企業(yè)為例,其生產(chǎn)過(guò)程中涉及的數(shù)據(jù)類型包括MES系統(tǒng)中的工單數(shù)據(jù)(平均每天產(chǎn)生500GB)、PLC日志(每條日志含15個(gè)字段)、設(shè)備運(yùn)行視頻(每小時(shí)產(chǎn)生2TB)等。這些數(shù)據(jù)在采集過(guò)程中需要經(jīng)過(guò)格式轉(zhuǎn)換、數(shù)據(jù)清洗和特征提取等多個(gè)步驟,才能用于后續(xù)的分析和應(yīng)用。具體來(lái)說(shuō),結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于MES系統(tǒng),其特點(diǎn)是數(shù)據(jù)格式規(guī)范、易于存儲(chǔ)和處理;半結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于PLC日志,其特點(diǎn)是部分字段有固定格式,部分字段為自由文本;非結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于設(shè)備運(yùn)行視頻,其特點(diǎn)是數(shù)據(jù)量大、內(nèi)容復(fù)雜。這些數(shù)據(jù)在采集過(guò)程中需要經(jīng)過(guò)不同的處理流程,才能滿足后續(xù)應(yīng)用的需求。異構(gòu)數(shù)據(jù)采集的技術(shù)框架數(shù)據(jù)適配層負(fù)責(zé)將不同格式的數(shù)據(jù)轉(zhuǎn)換為統(tǒng)一的格式。協(xié)議適配器負(fù)責(zé)處理不同的通信協(xié)議,確保數(shù)據(jù)傳輸?shù)姆€(wěn)定性。數(shù)據(jù)清洗模塊負(fù)責(zé)去除數(shù)據(jù)中的噪聲和異常值,提高數(shù)據(jù)質(zhì)量。數(shù)據(jù)存儲(chǔ)模塊負(fù)責(zé)將清洗后的數(shù)據(jù)存儲(chǔ)到數(shù)據(jù)庫(kù)中。數(shù)據(jù)查詢模塊負(fù)責(zé)提供數(shù)據(jù)查詢接口,方便用戶獲取數(shù)據(jù)。異構(gòu)數(shù)據(jù)采集的典型應(yīng)用案例電力行業(yè)多源數(shù)據(jù)融合通過(guò)混合架構(gòu)實(shí)現(xiàn)SCADA系統(tǒng)、AMI和無(wú)人機(jī)巡檢數(shù)據(jù)的融合?;ば袠I(yè)數(shù)據(jù)校驗(yàn)通過(guò)多源數(shù)據(jù)交叉驗(yàn)證模塊消除參數(shù)沖突。制造業(yè)數(shù)據(jù)標(biāo)準(zhǔn)化通過(guò)XSLT轉(zhuǎn)換規(guī)則統(tǒng)一不同設(shè)備數(shù)據(jù)格式。智能工廠數(shù)據(jù)采集通過(guò)邊緣計(jì)算節(jié)點(diǎn)實(shí)現(xiàn)實(shí)時(shí)數(shù)據(jù)采集和處理。異構(gòu)數(shù)據(jù)采集技術(shù)對(duì)比技術(shù)參數(shù)數(shù)據(jù)適配能力:高vs低協(xié)議兼容性:多vs少數(shù)據(jù)清洗能力:強(qiáng)vs弱成本:高vs低技術(shù)優(yōu)缺點(diǎn)高適配能力:支持多種數(shù)據(jù)格式,但成本高多協(xié)議兼容:適用于復(fù)雜環(huán)境,但開發(fā)難度大強(qiáng)清洗能力:數(shù)據(jù)質(zhì)量高,但處理時(shí)間長(zhǎng)低成本:適用于簡(jiǎn)單場(chǎng)景,但功能有限03第三章動(dòng)態(tài)環(huán)境下的工業(yè)大數(shù)據(jù)采集策略動(dòng)態(tài)采集環(huán)境的特征分析動(dòng)態(tài)環(huán)境下的工業(yè)大數(shù)據(jù)采集面臨著諸多挑戰(zhàn),主要包括設(shè)備拓?fù)渥兓?、通信網(wǎng)絡(luò)波動(dòng)和數(shù)據(jù)質(zhì)量不穩(wěn)定等問(wèn)題。以某大型制造企業(yè)為例,其生產(chǎn)過(guò)程中涉及的數(shù)據(jù)類型包括結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。這些數(shù)據(jù)在采集過(guò)程中需要經(jīng)過(guò)格式轉(zhuǎn)換、數(shù)據(jù)清洗和特征提取等多個(gè)步驟,才能用于后續(xù)的分析和應(yīng)用。具體來(lái)說(shuō),結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于MES系統(tǒng),其特點(diǎn)是數(shù)據(jù)格式規(guī)范、易于存儲(chǔ)和處理;半結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于PLC日志,其特點(diǎn)是部分字段有固定格式,部分字段為自由文本;非結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于設(shè)備運(yùn)行視頻,其特點(diǎn)是數(shù)據(jù)量大、內(nèi)容復(fù)雜。這些數(shù)據(jù)在采集過(guò)程中需要經(jīng)過(guò)不同的處理流程,才能滿足后續(xù)應(yīng)用的需求。動(dòng)態(tài)環(huán)境下的采集技術(shù)架構(gòu)拓?fù)浒l(fā)現(xiàn)模塊負(fù)責(zé)自動(dòng)發(fā)現(xiàn)和識(shí)別設(shè)備拓?fù)渥兓X?fù)載均衡器負(fù)責(zé)動(dòng)態(tài)調(diào)整采集頻率,優(yōu)化資源利用。故障恢復(fù)機(jī)制負(fù)責(zé)在數(shù)據(jù)丟失時(shí)進(jìn)行數(shù)據(jù)恢復(fù)。數(shù)據(jù)緩存模塊負(fù)責(zé)緩存丟失的數(shù)據(jù),以便后續(xù)回補(bǔ)。數(shù)據(jù)同步模塊負(fù)責(zé)同步不同設(shè)備的數(shù)據(jù)。動(dòng)態(tài)環(huán)境采集的典型應(yīng)用案例軌道交通設(shè)備監(jiān)控通過(guò)5G+邊緣計(jì)算架構(gòu)實(shí)現(xiàn)設(shè)備狀態(tài)實(shí)時(shí)采集。柔性制造系統(tǒng)采用ROS機(jī)器人集群動(dòng)態(tài)采集注塑機(jī)參數(shù)。移動(dòng)設(shè)備數(shù)據(jù)采集通過(guò)無(wú)人機(jī)搭載激光雷達(dá)采集橋梁變形數(shù)據(jù)。智能環(huán)境監(jiān)測(cè)通過(guò)動(dòng)態(tài)傳感器網(wǎng)絡(luò)監(jiān)測(cè)環(huán)境變化。動(dòng)態(tài)環(huán)境采集技術(shù)對(duì)比技術(shù)參數(shù)拓?fù)浒l(fā)現(xiàn)能力:高vs低負(fù)載均衡能力:強(qiáng)vs弱故障恢復(fù)能力:高vs低成本:高vs低技術(shù)優(yōu)缺點(diǎn)高拓?fù)浒l(fā)現(xiàn)能力:適用于復(fù)雜環(huán)境,但成本高強(qiáng)負(fù)載均衡能力:資源利用率高,但開發(fā)難度大高故障恢復(fù)能力:數(shù)據(jù)丟失少,但處理時(shí)間長(zhǎng)低成本:適用于簡(jiǎn)單場(chǎng)景,但功能有限04第四章邊緣計(jì)算驅(qū)動(dòng)的工業(yè)大數(shù)據(jù)采集優(yōu)化邊緣計(jì)算的必要性分析邊緣計(jì)算在工業(yè)大數(shù)據(jù)采集中具有重要的應(yīng)用價(jià)值,它可以顯著提高數(shù)據(jù)采集的實(shí)時(shí)性和效率,同時(shí)降低數(shù)據(jù)傳輸?shù)难舆t和帶寬壓力。以某大型制造企業(yè)為例,其生產(chǎn)過(guò)程中涉及的數(shù)據(jù)類型包括結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。這些數(shù)據(jù)在采集過(guò)程中需要經(jīng)過(guò)格式轉(zhuǎn)換、數(shù)據(jù)清洗和特征提取等多個(gè)步驟,才能用于后續(xù)的分析和應(yīng)用。具體來(lái)說(shuō),結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于MES系統(tǒng),其特點(diǎn)是數(shù)據(jù)格式規(guī)范、易于存儲(chǔ)和處理;半結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于PLC日志,其特點(diǎn)是部分字段有固定格式,部分字段為自由文本;非結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于設(shè)備運(yùn)行視頻,其特點(diǎn)是數(shù)據(jù)量大、內(nèi)容復(fù)雜。這些數(shù)據(jù)在采集過(guò)程中需要經(jīng)過(guò)不同的處理流程,才能滿足后續(xù)應(yīng)用的需求。邊緣計(jì)算采集架構(gòu)設(shè)計(jì)感知層負(fù)責(zé)采集傳感器數(shù)據(jù)。邊緣層負(fù)責(zé)數(shù)據(jù)處理和存儲(chǔ)。云協(xié)同層負(fù)責(zé)與云平臺(tái)進(jìn)行數(shù)據(jù)交互。數(shù)據(jù)緩存模塊負(fù)責(zé)緩存數(shù)據(jù),以便后續(xù)傳輸。數(shù)據(jù)同步模塊負(fù)責(zé)同步數(shù)據(jù)。邊緣計(jì)算采集的典型應(yīng)用案例電力系統(tǒng)邊緣優(yōu)化通過(guò)邊緣計(jì)算節(jié)點(diǎn)實(shí)現(xiàn)故障定位算法本地運(yùn)行。冶金行業(yè)智能質(zhì)檢在軋鋼線上部署AI邊緣推理模塊進(jìn)行缺陷檢測(cè)。制造業(yè)數(shù)據(jù)管理采用Hadoop+EdgeXFoundry混合架構(gòu)實(shí)現(xiàn)數(shù)據(jù)存儲(chǔ)。智能工廠邊緣計(jì)算通過(guò)邊緣計(jì)算節(jié)點(diǎn)實(shí)現(xiàn)實(shí)時(shí)數(shù)據(jù)采集和處理。邊緣計(jì)算采集技術(shù)對(duì)比技術(shù)參數(shù)算力:高vs低存儲(chǔ)容量:大vs小網(wǎng)絡(luò)延遲:低vs高成本:高vs低技術(shù)優(yōu)缺點(diǎn)高算力:處理能力強(qiáng),但成本高大存儲(chǔ)容量:數(shù)據(jù)存儲(chǔ)多,但成本高低網(wǎng)絡(luò)延遲:實(shí)時(shí)性高,但開發(fā)難度大低成本:適用于簡(jiǎn)單場(chǎng)景,但功能有限05第五章工業(yè)大數(shù)據(jù)采集的數(shù)據(jù)質(zhì)量保障研究數(shù)據(jù)質(zhì)量問(wèn)題的現(xiàn)狀分析工業(yè)大數(shù)據(jù)采集過(guò)程中,數(shù)據(jù)質(zhì)量問(wèn)題是一個(gè)普遍存在的問(wèn)題。這些問(wèn)題不僅會(huì)影響數(shù)據(jù)分析的準(zhǔn)確性,還會(huì)降低數(shù)據(jù)應(yīng)用的價(jià)值。以某大型制造企業(yè)為例,其生產(chǎn)過(guò)程中涉及的數(shù)據(jù)類型包括結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。這些數(shù)據(jù)在采集過(guò)程中需要經(jīng)過(guò)格式轉(zhuǎn)換、數(shù)據(jù)清洗和特征提取等多個(gè)步驟,才能用于后續(xù)的分析和應(yīng)用。具體來(lái)說(shuō),結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于MES系統(tǒng),其特點(diǎn)是數(shù)據(jù)格式規(guī)范、易于存儲(chǔ)和處理;半結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于PLC日志,其特點(diǎn)是部分字段有固定格式,部分字段為自由文本;非結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于設(shè)備運(yùn)行視頻,其特點(diǎn)是數(shù)據(jù)量大、內(nèi)容復(fù)雜。這些數(shù)據(jù)在采集過(guò)程中需要經(jīng)過(guò)不同的處理流程,才能滿足后續(xù)應(yīng)用的需求。數(shù)據(jù)質(zhì)量保障的技術(shù)框架靜態(tài)質(zhì)量檢測(cè)負(fù)責(zé)對(duì)數(shù)據(jù)進(jìn)行初步的質(zhì)量評(píng)估。動(dòng)態(tài)質(zhì)量監(jiān)控負(fù)責(zé)實(shí)時(shí)監(jiān)控?cái)?shù)據(jù)質(zhì)量變化。自適應(yīng)調(diào)整負(fù)責(zé)根據(jù)數(shù)據(jù)質(zhì)量變化調(diào)整采集策略。數(shù)據(jù)清洗模塊負(fù)責(zé)去除數(shù)據(jù)中的噪聲和異常值。數(shù)據(jù)校驗(yàn)?zāi)K負(fù)責(zé)驗(yàn)證數(shù)據(jù)的完整性和一致性。數(shù)據(jù)質(zhì)量保障的典型技術(shù)方案電力行業(yè)異常檢測(cè)通過(guò)YOLOv5模型自動(dòng)識(shí)別SCADA數(shù)據(jù)中的設(shè)備故障?;ば袠I(yè)數(shù)據(jù)清洗采用OpenCV+卡爾曼濾波處理攝像頭圖像數(shù)據(jù)。制造業(yè)數(shù)據(jù)校驗(yàn)通過(guò)多源數(shù)據(jù)交叉驗(yàn)證模塊消除參數(shù)沖突。智能工廠數(shù)據(jù)標(biāo)準(zhǔn)化通過(guò)XSLT轉(zhuǎn)換規(guī)則統(tǒng)一不同設(shè)備數(shù)據(jù)格式。數(shù)據(jù)質(zhì)量保障技術(shù)對(duì)比技術(shù)參數(shù)檢測(cè)能力:高vs低調(diào)整能力:強(qiáng)vs弱校驗(yàn)?zāi)芰Γ焊遶s低成本:高vs低技術(shù)優(yōu)缺點(diǎn)高檢測(cè)能力:發(fā)現(xiàn)問(wèn)題多,但誤報(bào)率高強(qiáng)調(diào)整調(diào)能力:適應(yīng)性強(qiáng),但成本高高校驗(yàn)?zāi)芰Γ簲?shù)據(jù)質(zhì)量高,但處理時(shí)間長(zhǎng)低成本:適用于簡(jiǎn)單場(chǎng)景,但功能有限06第六章基于機(jī)器學(xué)習(xí)的動(dòng)態(tài)數(shù)據(jù)質(zhì)量保障技術(shù)機(jī)器學(xué)習(xí)在數(shù)據(jù)質(zhì)量保障中的應(yīng)用場(chǎng)景機(jī)器學(xué)習(xí)在工業(yè)大數(shù)據(jù)采集和數(shù)據(jù)質(zhì)量保障中具有廣泛的應(yīng)用場(chǎng)景。通過(guò)使用機(jī)器學(xué)習(xí)算法,可以對(duì)工業(yè)大數(shù)據(jù)進(jìn)行自動(dòng)化的質(zhì)量檢測(cè)、清洗和調(diào)整,從而提高數(shù)據(jù)的質(zhì)量和可用性。以某大型制造企業(yè)為例,其生產(chǎn)過(guò)程中涉及的數(shù)據(jù)類型包括結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。這些數(shù)據(jù)在采集過(guò)程中需要經(jīng)過(guò)格式轉(zhuǎn)換、數(shù)據(jù)清洗和特征提取等多個(gè)步驟,才能用于后續(xù)的分析和應(yīng)用。具體來(lái)說(shuō),結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于MES系統(tǒng),其特點(diǎn)是數(shù)據(jù)格式規(guī)范、易于存儲(chǔ)和處理;半結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于PLC日志,其特點(diǎn)是部分字段有固定格式,部分字段為自由文本;非結(jié)構(gòu)化數(shù)據(jù)主要來(lái)源于設(shè)備運(yùn)行視頻,其特點(diǎn)是數(shù)據(jù)量大、內(nèi)容復(fù)雜。這些數(shù)據(jù)在采集過(guò)程中需要經(jīng)過(guò)不同的處理流程,才能滿足后續(xù)應(yīng)用的需求。機(jī)器學(xué)習(xí)數(shù)據(jù)質(zhì)量保障的技術(shù)框架特征工程層負(fù)責(zé)提取數(shù)據(jù)特征。模型訓(xùn)練層負(fù)責(zé)訓(xùn)練數(shù)據(jù)質(zhì)量檢測(cè)模型。自適應(yīng)調(diào)整層負(fù)責(zé)根據(jù)數(shù)據(jù)質(zhì)量變化調(diào)整模型參數(shù)。數(shù)據(jù)驗(yàn)證模塊負(fù)責(zé)驗(yàn)證數(shù)據(jù)質(zhì)量。結(jié)果輸出模塊負(fù)責(zé)輸出數(shù)據(jù)質(zhì)量檢測(cè)結(jié)果。機(jī)器學(xué)習(xí)數(shù)據(jù)質(zhì)量保障的典型技術(shù)方案電力行業(yè)異常檢測(cè)通過(guò)YOLOv5模型自動(dòng)識(shí)別SCADA數(shù)據(jù)中的設(shè)備故障?;ば袠I(yè)數(shù)據(jù)清洗采用OpenCV+卡爾曼濾波處理攝像頭圖像數(shù)據(jù)。制造業(yè)數(shù)據(jù)校驗(yàn)通過(guò)多源數(shù)據(jù)交叉驗(yàn)證模塊消除參數(shù)沖突。智能工廠數(shù)據(jù)標(biāo)準(zhǔn)化通過(guò)XSLT轉(zhuǎn)換規(guī)則統(tǒng)一不同設(shè)備數(shù)據(jù)格式。機(jī)器學(xué)習(xí)數(shù)據(jù)質(zhì)量保障技術(shù)對(duì)比技術(shù)參數(shù)模型復(fù)雜度:高vs低檢測(cè)精度:高vs低調(diào)整能力:強(qiáng)vs弱成本:高vs低技術(shù)優(yōu)缺點(diǎn)高模型復(fù)雜度:檢測(cè)能力強(qiáng),但計(jì)算量大高檢測(cè)精度:誤報(bào)率低,但訓(xùn)練時(shí)間長(zhǎng)強(qiáng)調(diào)整調(diào)能力:適應(yīng)性強(qiáng),但成本高低

溫馨提示

  • 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

最新文檔

評(píng)論

0/150

提交評(píng)論