NLP文本語(yǔ)義分析服務(wù)

技術(shù)方案.5.1.網(wǎng)絡(luò)通信安全 17TOC\o"1-5"\h\z第一章項(xiàng)目概述 1項(xiàng)目背景 1建設(shè)目標(biāo) 1建設(shè)任務(wù) 2建設(shè)周期 2建設(shè)原則 2建設(shè)依據(jù) 2第二章需求分析 6數(shù)據(jù)需求分析 6技術(shù)需求分析 6功能需求分析 7第三章總體設(shè)計(jì)方案 10總體技術(shù)路線 10設(shè)計(jì)約束原則 10關(guān)鍵核心技術(shù) 10總體架構(gòu)和功能 14網(wǎng)絡(luò)部署 15技術(shù)路線 16系統(tǒng)安全建設(shè) 17應(yīng)用系統(tǒng)數(shù)據(jù)安全 17安全管理設(shè)計(jì) 18系統(tǒng)性能要求 19第四章文本語(yǔ)義分析服務(wù)建設(shè)內(nèi)容 20語(yǔ)義服務(wù)內(nèi)容 20概述 20文本結(jié)構(gòu)化服務(wù) 20要素抽取服務(wù) 23分析挖掘服務(wù) 25數(shù)據(jù)標(biāo)注服務(wù) 2742語(yǔ)義模型定制及訓(xùn)練 28標(biāo)準(zhǔn)接口服務(wù) 29業(yè)務(wù)庫(kù)建設(shè) 30第五章業(yè)務(wù)場(chǎng)景詳細(xì)設(shè)計(jì)方案 31文本預(yù)處理 31文本預(yù)處理目的及流程圖 31文本預(yù)處理流程描述 31模塊輸入 31模塊輸出 31算法設(shè)計(jì) 32文本語(yǔ)義分析 34語(yǔ)義解析 34IITOC\o"1-5"\h\z語(yǔ)義服務(wù) 35案件類(lèi)型自動(dòng)分類(lèi) 36數(shù)據(jù)準(zhǔn)備 36算法設(shè)計(jì) 36案件文本要素抽取 40地址標(biāo)準(zhǔn)化 42數(shù)據(jù)基礎(chǔ) 42分析流程設(shè)計(jì) 43地名識(shí)別 43地名標(biāo)準(zhǔn)化 475.6.案件文本自動(dòng)摘要 51數(shù)據(jù)準(zhǔn)備 51分析流程設(shè)計(jì) 51算法設(shè)計(jì) 53智能串并案 60定義 60應(yīng)用分析 61業(yè)務(wù)流程 61案件關(guān)聯(lián)挖掘分析算法設(shè)計(jì) 62警情案情關(guān)聯(lián)分析 64第六章知識(shí)獲取與維護(hù) 68語(yǔ)言知識(shí)自動(dòng)獲取 68in#PATH4)#hdfsKerberos認(rèn)證方式#安裝Kerberosyuminstallkrb5-workstationkrb5-libskrb5-auth-dialog#首先在/etc/krb5.conf文件中進(jìn)行服務(wù)器跟驗(yàn)證策略的配置;#例如：[logging]default=FILE:/var/log/krb5libs.logkdc=FILE:/var/log/krb5kdc.logadmin_server=FILE:/var/log/kadmind.log[libdefaults]dns_lookup_realm=falseticketjifetime=24h#認(rèn)證憑證有效時(shí)間renewjifetime=7dforwardable=truerdns=falsedefault_realm=EXAMPLE.COM#default_ccache_name=KEYRING:persistent:%(uid)[realms]EXAMPLE.COM=(kdc=nodel92#nodel92為機(jī)器名adminserver=nodel92)[domain_realm].=EXAMPLE.COM=EXAMPLE.COM#然后在Kerberos服務(wù)端生成一個(gè)用戶文件傳至本機(jī)；hdfs.keytab#kdc生成的認(rèn)證文件設(shè)置環(huán)境變量exportKRB5CCNAME=/tmp/krb5cc_10002kinit -kt/usr/lib/hadoop-2.7.4/etc/hadoop/hdfs.keytabhdfs@EXAMPLE.COM#進(jìn)行Kerberos客戶端的權(quán)限認(rèn)證#klist-e#查看狀態(tài)，是否認(rèn)證成功，認(rèn)證的cache是否保存在/tmp/krb5cc_10002設(shè)置定時(shí)任務(wù)，認(rèn)證的cache有效時(shí)間，需要設(shè)置定時(shí)任務(wù)保證cache一直有效，或者增加足夠有效時(shí)間。在$(HADOOP_HOME}/etc/core-site.xml中設(shè)置認(rèn)證方式#如下<configuration><property><name>hadoop.security.authentication</name><value>kerberos</value></property></configuration>使用hadoopfs-Ishdfs://xxx.xxx.xxx.xxx:xx/檢查以上的有效性#注意#為了保證對(duì)ultra-nip的支持,必須在/etc/profile和/etc/bashrc2個(gè)文件中同時(shí)增加以上環(huán)境變量。2、ultra.nlp程序包的安裝ula_nlp_tensorflow工程下的ultra目錄