運用Hadoop分布式架構補充傳統(tǒng)架構(IOE)迎戰(zhàn)大數(shù)據(jù)童小軍2013年3月提綱Hadoop補充傳統(tǒng)架構應對大數(shù)據(jù)Hadoop云計算架構解析Hadoop應用案例和云平臺EasyHadoop,RedHadoop介紹Hadoop是什么?RedHadoop海量數(shù)據(jù)處理操作系統(tǒng)存儲+計算(HDFS+MapReduce)數(shù)據(jù)倉庫(Hive)數(shù)據(jù)庫(Hbase)批處理(Pig)搜索(Solr)挖掘算法(Mahout)BSP模型(Hama)分布式鎖(Zoomkeeper)大規(guī)模搜索(Nutch)SqoopFlume處理框架->分布式OS->生態(tài)系統(tǒng)更多Hadoop在云計算的位置私有云公有云混合云Infrastructureasa

Service以服務的形式提供虛擬硬件資源，如虛擬主機/存儲/網(wǎng)絡等資源。用戶無需購買服務器、網(wǎng)絡設備、存儲設備，只需通過互聯(lián)網(wǎng)租賃即可搭建自己的應用系統(tǒng)典型應用：AmazonWebService(AWS)PlatformasaService提供應用服務引擎，如互聯(lián)網(wǎng)應用編程接口/運行平臺等。用戶基于該應用服務引擎，可以構建該類應用。典型應用：GoogleAppEngine,F,MicrosoftAzure服務平臺Softwareasa

Service用戶通過Internet(如瀏覽器)來使用軟件。用戶不必購買軟件，只需按需租用軟件典型應用：GoogleDoc,S,OracleCRMOnDemand,OfficeLiveWorkspace面向外部用戶需求，通過開放網(wǎng)絡提供云計算服務IDC，GoogleApp，Saleforce在線CRM大型企業(yè)按照云計算的架構搭建平臺，面向企業(yè)內(nèi)部需求提供云計算服務企業(yè)內(nèi)部數(shù)據(jù)中心等兼顧以上兩種情況的云計算服務AmazonWebServer等既為企業(yè)內(nèi)部又為外部用戶提供云計算服務按提供的服務類型按云服務的對象IAASPAASSAASIAAS分布存儲分布計算云計算核心技術有兩極3200臺主機傳統(tǒng)架構(IOE)和云計算(虛擬化)的主要瓶頸服務器服務器服務器VPSVPSVPSVPSVPSVPS存儲陣列數(shù)據(jù)移動EMC存儲OracleIBM磁盤IO瓶頸帶寬瓶頸計算瓶頸傳統(tǒng)架構(IOE)和云計算(虛擬化)的主要瓶頸服務器服務器服務器VPSVPSVPSVPSVPSVPS存儲陣列數(shù)據(jù)移動EMC存儲OracleIBM磁盤IO瓶頸帶寬瓶頸計算瓶頸cpucpucpu基于共享存儲和高性能計算的架構。IO能力和機器數(shù)量成非正比計算能力和機器數(shù)量成正比傳統(tǒng)架構(IOE)和云計算(虛擬化)的主要瓶頸數(shù)據(jù)移動磁盤IO瓶頸帶寬瓶頸計算瓶頸服務器存儲cpu移動計算而非移動數(shù)據(jù),化整為零(128m),分片處理；本地化計算,并行IO,降低網(wǎng)絡通信服務器存儲cpu服務器存儲cpu服務器存儲cpu服務器存儲cpu服務器存儲cpu交換機HDFSMAPReduceIO能力和機器數(shù)量成正比計算能力和機器數(shù)量成正比Hadoop補充IOE存儲架構應對大數(shù)據(jù)Hbase使用Hadoop補充傳統(tǒng)架構(IOE)HiveHadoop處于群雄逐鹿的春秋戰(zhàn)國時代Apache,Cloudera,MapR,HotonWorks,Intel->發(fā)行版本IBM,HP,Dell,浪潮,曙光,云創(chuàng)存儲->一體機天云系(天云趨勢,天云科技),友友,云創(chuàng)存儲->解決方案亞馬遜,百度云,騰訊云,移動打云->云服務為何Intel會大力扶植Hadoop?服務硬件體系的混戰(zhàn)(X86->Power)(PCServer->小型機)提綱Hadoop補充傳傳統(tǒng)架構應應對大數(shù)據(jù)據(jù)Hadoop云計算算架構解析析Hadoop應用用案例和云云平臺EasyHadoop,RedHadoop介介紹Google云計算算平臺體系系結構：2003~2006年在多篇篇學術論文文公開后端系統(tǒng)：：Google數(shù)據(jù)據(jù)分析平臺臺Google集群群管理系統(tǒng)統(tǒng)存儲+計算算(HDFS+MapReduce)數(shù)據(jù)倉庫(Hive)數(shù)據(jù)庫(Hbase)批處理(Pig)BSP模型型(Hama)分布式鎖(Zoomkeeper)Hadoop是Google三三架馬車的的基礎HadoopHDFSGoogleGFS分分布式文文件系統(tǒng)HDFS2的模塊NameNode計計算DataNode存存儲HadoopMapReduceGoogleMapReduce面向大規(guī)模模數(shù)據(jù)處理理的并行編編程系統(tǒng)14/32JobTrackerTaskTracker(MapTask)TaskTracker(MapTask)TaskTracker(MapTask)TaskTracker(ReduceTask)TaskTracker(ReduceTask)用戶程序(JobClient)中間結果中間結果中間結果輸出數(shù)據(jù)輸出數(shù)據(jù)提交作業(yè)任務調(diào)度任務調(diào)度狀態(tài)監(jiān)控狀態(tài)監(jiān)控Map任務從DFS/HugeTable等中讀數(shù)據(jù)分片Map任務在本地寫中間結果Reduce任務讀Map輸出的中間結果Reduce任務在DFS/HugeTable寫輸出數(shù)據(jù)MapReduce的目標自動并行化化：開發(fā)者不不必關心底底層并行處處理系統(tǒng)的的系統(tǒng)自動可靠性性處理：開發(fā)者不不必關心設設備、網(wǎng)絡絡的臨時/永久的故故障編程接口Java語語言編程接接口、C++語言編編程接口(Pipes)其他語言編編程接口(Streaming)，可可以采用Python/Ruby/Shell等用戶自定義義map函數(shù)數(shù)接收一個輸輸入對<Key,Value>，產(chǎn)生一個個中間對<K’,V’>用戶自定義義reduce函數(shù)接收一個中中間K’和對應的V’集，

合并V’集，

形成一一個較小的的Value集HBaseGoogleBigTable

海量結結構化數(shù)據(jù)據(jù)實時存儲儲訪問系統(tǒng)統(tǒng)基于HDFS的主備備Master、多多個RegionSvr通過過ZK構成成集群數(shù)據(jù)按照三三級索引組組織，三次次訪問可以以定位數(shù)據(jù)據(jù)數(shù)據(jù)寫操作作在內(nèi)存完完成，但是是需要對文文件實施合合并操作提綱Hadoop補充傳傳統(tǒng)架構應應對大數(shù)據(jù)據(jù)Hadoop云計算算架構解析析Hadoop應用用案例和云云平臺EasyHadoop,RedHadoop介介紹Hadoop/HiveCluster@aliyunUser->phpHiveAdmin->HiveServer->HadoopHDCluster:80Core,180GHZ,10TB4GRAM,4Core*2.26GHz500GB啟動100個Map生成100億數(shù)據(jù)據(jù)通過100個Map用Perl隨隨機生成數(shù)數(shù)據(jù)準備,1kw,1億億,10億億,100億,100GB數(shù)數(shù)據(jù)集通過Hive創(chuàng)建測測試庫表結結構使用phpHiveadmin+HQL查詢返返回結果SELECTidFROMTablewhereidlike'%JA-sq%';

(模糊糊匹配查詢詢出ID帶帶JA-sq的的車牌號號)1億數(shù)據(jù)據(jù),并行5Map進程,144w/s掃描描速度,69s返返回10億數(shù)據(jù)據(jù),并行46Map進程,800w/s掃掃描速度,117s返回100億數(shù)數(shù)據(jù),并行行453Map進程程,5400w/s掃描速速度,3分分鐘返回,基本滿足足需求。SELECTid,COUNT(*)FROMTableGROUPBYid

(對每每個車牌號號分組歸并并,并求出出現(xiàn)次數(shù))1億數(shù)據(jù)據(jù),并行5Map進程,2Reduce進進程,104w/s處理速速度,96s返回回10億數(shù)據(jù)據(jù),并行46Map進程,13Reduce進進程,230w/s處理速速度,7分分鐘返回100億數(shù)數(shù)據(jù),并行行453Map進程程,121Reduce進程程,500w/s處處理速度度,54分分鐘返回。。Hadoop預算,其他方案案的成本對對比!投入成本(10TB預算)IOE(IBM+Oracle+EMC)時代代(x)kw+自建Hadoop集集群(20*4w+4w)=80w+使用云主機機構建Hadoop[20*7970=15.94w/年]轉變轉變千萬時代百萬時代十幾萬時代代初創(chuàng)型公司司中型技術型型公司政府,銀行行,電信年成本:1.5w/T我們還有那那些成本壓壓縮空間?實施周期IBM+Oracle+EMC時代代(月)自建Hadoop集集群(1年年-半年)[學習和和培訓]阿里云Hadoop時代(星星期/月)轉變轉變季度/月1年/半年年月/星期個人,初創(chuàng)創(chuàng)公司中型公司政府,銀行行,電信月1年/半年年中型公司政府,銀行行,電信維護成本IBM+Oracle+EMC時代代(規(guī)劃劃,實施,維護,管管理,)廠廠商專業(yè)業(yè)人員配合合[每次按按小時收費費]自建Hadoop集集群(學習習,經(jīng)驗,人才培育育)Hadoop云時時代(統(tǒng)統(tǒng)一專人管管理和維護護)轉變轉變統(tǒng)一維護個人,初創(chuàng)創(chuàng)公司廠商專業(yè)支支持自己培養(yǎng)中型公司政府,銀行行,電信使用開放的的技術還是是封閉的技技術?Hadoop應用用案例和云云平臺UserCase1(智智慧交通)用戶:最大大城市,交交通領域(Citytraffic)場景:車牌牌記錄[CarLicencePlate],100億[10Billion]/年需求:小時時級別->優(yōu)化到分分鐘級[Minute]->未來優(yōu)優(yōu)化到秒級級[Seconds]查詢IntelligentTransportationSmarterCities場景:車車輛異?？炜焖僮R別VehicleAbnormal交通安全問問題培訓目錄移動,聯(lián)通通公司大數(shù)數(shù)據(jù)平臺云計算案例例分析—上上海公司基基于云計算算平臺的移移動用戶行行為特征分分析移動用戶行行為特征分分析模型渠道偏好分分析客戶細分新業(yè)務關聯(lián)聯(lián)時間性能：數(shù)據(jù)處理理性能增加加約30倍倍，數(shù)據(jù)挖挖掘性能增增加約9倍倍,整個應應用性能提提高約3-7倍成本優(yōu)勢：：成本降低6倍，運維維耗電相當當，占用機機房面積更更少，更高高的處理能能力正確度：符合商業(yè)標標準云計算案例例分析—江江蘇公司基基于云計算算平臺的信信令監(jiān)測系系統(tǒng)基于云計算算平臺的信信令監(jiān)測系系統(tǒng)實驗基于BC-PDM的的ETL進進行API級別的二二次開發(fā)，，形成信令令信息分析析系統(tǒng)功能包括SMS信令令信息分析析SP提交短短信過程分分析SP提交短短信成功率率分析GPRS的的GN接口口信令分析析GN接口通通信過程分分析GN接口信信令過程分分析正確性100%，數(shù)數(shù)據(jù)查詢、、統(tǒng)計性能能提高7-15倍，，成本降低低4倍數(shù)據(jù)范圍：：一個月數(shù)數(shù)據(jù)查詢案例查詢：返回回以上功能能的某個時時段結果組合查詢：：滿足4個個復雜條件件的查詢實驗條件單位秒聯(lián)通電信詳詳單查詢系系統(tǒng)業(yè)務務問問題題提供供所所有有手手機機用用戶戶的的詳詳單單在在線線查查詢詢系系統(tǒng)統(tǒng)提供供七七大大種種類類信信息息套餐餐及及固固定定費費、、通通話話、、短短/彩彩信信、、上上網(wǎng)網(wǎng)、、增增值值業(yè)業(yè)務務、、代代收收費費用用業(yè)務務扣扣費費、、其其他他扣扣費費高峰峰時時期期提提供供千千萬萬并并發(fā)發(fā)用用戶戶在在線線查查詢詢請請求求已有有方方案案使用用兩兩臺臺IBMP5570小小型型機機作作為為數(shù)數(shù)據(jù)據(jù)庫庫服服務務器器使用用某某關關系系數(shù)數(shù)據(jù)據(jù)庫庫只存存放放3個個月月數(shù)數(shù)據(jù)據(jù)最多多提提供供100查查詢詢/秒秒查查詢詢需要要限限制制每每個個用用戶戶每每天天查查詢詢次次數(shù)數(shù)來來保保證證系系統(tǒng)統(tǒng)穩(wěn)穩(wěn)定定服服務務聯(lián)通通電電信信詳詳單單查查詢詢系系統(tǒng)統(tǒng)(續(xù)續(xù))新方方案案數(shù)數(shù)據(jù)據(jù)規(guī)規(guī)模?？扇萑菁{納360TB原原始始數(shù)數(shù)據(jù)據(jù)存放放半半年年七七大大種種類類詳詳單單數(shù)數(shù)據(jù)據(jù)平均均每每天天2TB新新增增數(shù)數(shù)據(jù)據(jù)導導入入新方方案案構建建80臺臺雙雙路路IA服服務務器器集集群群，，安安裝裝英特特爾爾Hadoop發(fā)發(fā)行行版版構構建建分分布布式式數(shù)數(shù)據(jù)據(jù)庫庫集集群群共提提供供400TB詳詳單單數(shù)數(shù)據(jù)據(jù)存存儲儲容容量量集群群提提供供每每秒秒80萬萬條條詳詳單單數(shù)數(shù)據(jù)據(jù)插插入入集群群可可以以保保證證每每秒秒2萬萬條條月月詳詳單單查查詢請請求求，，滿滿足足在在線線用用戶戶需需要要成功功案案例例二二-聯(lián)聯(lián)通通電電信信詳詳單單查查詢詢系系統(tǒng)統(tǒng)(續(xù)續(xù))阿里里淘淘寶寶的的案案例例每日日新新增增數(shù)數(shù)據(jù)據(jù)20T累積積數(shù)數(shù)據(jù)據(jù)14P3200+服務務器器的的云云計計算算平平臺臺每天天處處理理100,000+作業(yè)業(yè)任任務務，，包包括括100+新增增作作業(yè)業(yè)任任務務每天天處處理理1P+數(shù)據(jù)據(jù)，，包包括括0.5%新增增數(shù)數(shù)據(jù)據(jù)總體體數(shù)數(shù)據(jù)據(jù)規(guī)規(guī)模模阿里里金金融融通通過過大大數(shù)數(shù)據(jù)據(jù)整整合合掘掘金金!阿里金融的信信用評估系統(tǒng)統(tǒng)會自動分析析小微企業(yè)的的數(shù)據(jù)，例如如企業(yè)通過支支付寶,淘寶寶進行的支付付數(shù)據(jù)，最終終算出信用評評估和放貸額額度。截止2011年底，阿里里金融對近30萬家小微微企業(yè)進行信用評估估。累計投放放96800家家，投放貸款154億，壞賬率為交交易額的0.76%。阿里金融的實實時業(yè)務墻阿里金融的數(shù)數(shù)據(jù)模型任務務（局部）每個模型任務務都是面向海海量數(shù)據(jù)的大大規(guī)模運算任任務。天貓/淘寶雙雙十一191億背后的開源技技術?@dbatools:雙雙十一一天天時間，支付寶核心數(shù)數(shù)據(jù)庫集群處處理了41億億個事務，執(zhí)行285億億次SQL，，訪問1931億次內(nèi)存數(shù)數(shù)據(jù)塊，13億個物理理讀，生成15TB日志。數(shù)據(jù)應用開發(fā)發(fā)平臺——數(shù)數(shù)據(jù)工場DataIntegrationDBsyncTTHiveHadoopMapReduceHadoopHDFSDatax報表需求(淘淘數(shù)據(jù))Hbase即席查詢(adhoc)數(shù)據(jù)分析數(shù)據(jù)挖掘數(shù)據(jù)產(chǎn)品淘寶數(shù)據(jù)平臺臺—產(chǎn)品架構構實時計算底層平臺數(shù)據(jù)開發(fā)平臺臺數(shù)據(jù)應用成功案例四-暴風影音從最早3個試試驗節(jié)點,到到8個線上節(jié)節(jié)點,到現(xiàn)在在的30個節(jié)節(jié)點。每天處理日志志1.2T,20億行。。存儲設計容容量200TB對外提供產(chǎn)產(chǎn)品分析,廣廣告分析,用用戶分析服服務。每天處理任務務上千個jobs數(shù)據(jù)系統(tǒng)的進進化-一代數(shù)據(jù)系統(tǒng)的進進化-二代數(shù)據(jù)系統(tǒng)的進進化-三代Hadoop技術其他他應用領域電信醫(yī)療交通公安航空電力金融搜索社交游戲視頻民生核心大數(shù)據(jù)時代需需要跨越的的巨大障礙大數(shù)據(jù)(TB)大需求大集群(3臺臺)原有系統(tǒng)的改改造和遷移運維方式轉變變編程方式轉變變平臺的數(shù)據(jù)遷遷移人才的匱乏工具的缺乏廠商版本數(shù)據(jù)安全商業(yè)模式和模模型的轉變大量資金的投投入無法的看到產(chǎn)產(chǎn)出大數(shù)據(jù)思維方方式和模式轉轉變海量用戶大規(guī)模批量服服務(服務1.0)決策邏輯數(shù)據(jù)庫用戶1邏輯1邏輯N數(shù)據(jù)集編輯人員用戶N編輯邏輯信息生產(chǎn)者信息消費者Mysql/Oracle大數(shù)據(jù)倉庫海量用戶大規(guī)模個性化化服務(服務務2.0)決策邏輯大數(shù)據(jù)庫用戶1邏輯1服務數(shù)據(jù)1用戶N邏輯N服務數(shù)據(jù)N原始數(shù)據(jù)N挖掘邏輯NHiveHbaseStormHadoop原始數(shù)據(jù)1原始數(shù)據(jù)2信息生產(chǎn)者者/消費者規(guī)則制定上帝之手本質(zhì):智能組組織->智能能群體實時由被動的IT支撐向主動動的以數(shù)據(jù)為為核心的IT服務轉型深度擁抱互聯(lián)聯(lián)網(wǎng)提綱Hadoop補充傳統(tǒng)架架構應對大數(shù)數(shù)據(jù)Hadoop云計算架構構解析Hadoop應用案例例和云平臺EasyHadoop,RedHadoop介介紹52研發(fā)難實施難管理難開源Hadoop軟件需要更友好的用戶接口和商業(yè)支持。市場需求開源Hadoop之路那那些難點？？為什么推出EasyHadoop版版產(chǎn)品開源hadoop的開發(fā)發(fā)困難之處:1.難安裝裝,部署,配配置2.難管理,監(jiān)控3.難學習,算法開發(fā)4.應用少,難使用5.找人才難難6.托管難,管理網(wǎng)絡難難。EasyHadoop立志將Hadoop的

[易易用性,可用用性]

做到到極致!Hadoop類似DOS、Linux，命令行行操作界面化提升Hadoop管理1.HAProxy用用作Hive負載均衡衡2.編寫Daemon程序用作進進程監(jiān)控，防防止進程掛起起3.編寫任任務監(jiān)控腳本本，失敗任務務自動重試4.編寫集集群快速安裝裝部署軟件EasyHadoop5.編寫Hive查詢詢界面phpHiveAdmin，，做開放數(shù)據(jù)據(jù)平臺6.監(jiān)控工工具Cacti，Ganglia，，Nagios一個都不不能少。監(jiān)控越詳細越越好。56Easyhadoop,RedHadoop產(chǎn)產(chǎn)品和社區(qū)區(qū)ChinaBigData社區(qū)Easyhadoop社社區(qū)RedHadoop培訓講座開源軟件開源社區(qū)技術出版物聚會沙龍RedHadoop一體體機RedHadoopCloudRedHadoop發(fā)行行版聚合和培養(yǎng)客客戶,用戶戶,合作伙伴伴(品牌牌+渠渠道)打造高高價值值產(chǎn)品品(產(chǎn)品品)舉辦大大會咨詢Hadoop核核心心Apps管管理理器Apps應應用用程序序理念:大數(shù)數(shù)據(jù)驅(qū)驅(qū)動智智慧地地球,智慧慧城市市57行業(yè)解解決方方案(電信信,醫(yī)醫(yī)療,交通通,互互聯(lián)網(wǎng)網(wǎng))Apps應應用用層(AppsStore)phpHiveAdmin,Rhadoop,EasyPig,CronHub,ETL,ReportRedHadoop發(fā)行版版方案案AppsManager管管理理層(用戶戶/權權限)核心算算法圖像,視頻頻,文文本,挖掘掘Hadoop/Hbase核心存儲和和計算算虛擬化化系統(tǒng)統(tǒng)管理理/NOVA海量數(shù)數(shù)據(jù)分分布式式文件件系統(tǒng)統(tǒng)HDFSRedHadoopBigDataCloud技技術術架構構搜索引引擎開源的的Linux/Windows操操作系系統(tǒng)基基于于Xen的的虛擬擬機分布式式并發(fā)發(fā)控制制/Zoomkeeper結構化化海量量數(shù)據(jù)據(jù)管理理Hbase并行程程序MapReduce數(shù)據(jù)挖挖掘工工具庫庫OS-Mahout/pig搜索引引擎核核OS-SolrCloud云計算算應用用層各類新新型IT支支撐系系統(tǒng)搜索引引擎郵郵件件系統(tǒng)統(tǒng)等等互聯(lián)聯(lián)網(wǎng)應應用云計算算服務務層數(shù)據(jù)挖挖掘：：挖掘掘應用用的算算法工工具數(shù)據(jù)倉倉庫：：提供供海量量對象象存儲儲能力力搜索引引擎：：提提供基基本的的搜索索引擎擎能力力云計算算平臺臺層MapReduce2+BSP：：并行行程序序框架架Hbase：結結構化化數(shù)據(jù)據(jù)存儲儲HDFS：：海量量數(shù)據(jù)據(jù)的分分布式式文件件系統(tǒng)統(tǒng)CloudFoundry：多多語言言應用用部署署平臺臺openstrack:Swift：：海量量對象象存儲儲系統(tǒng)統(tǒng)openstrack:NOVA:云云計計算平平臺系系統(tǒng)管管理虛擬化化資源源層構建在在海量量同質(zhì)質(zhì)化的的PC與不不可靠靠硬盤盤上使用開開源的的openstrack+Xen提供供計算算資源源的虛虛擬化化運行于于開源源的CentOSLinux系系統(tǒng)之之上對象存存儲系系統(tǒng)Swift并行程程序BSD+Hama+MPI數(shù)據(jù)倉倉庫/ETL/ReportOS-Hive/MRQLCloudFoundry/應應用部部署廣告引引擎存儲,搜索索,語語音APIIOS,Android本本地APP桌面,移動動瀏覽覽器RedHadoop國國產(chǎn)安安全Hadoop發(fā)發(fā)行版版本1.優(yōu)優(yōu)先解解決數(shù)數(shù)據(jù)和和平臺臺安全全問題題。12/31/2022RedHadoop存存儲計算一一體機交換機DataNode+JobTrackerHiveServerRedHadoop核心節(jié)點點NameNode+JobTrackerApps管管理器Apps應應用程序序DataNode+JobTrackerDataNode+JobTrackerDataNode+JobTracker產(chǎn)品特性:集成RedHadoop正式式發(fā)行版集成Habase數(shù)數(shù)據(jù)庫發(fā)發(fā)行版集成phpHiveAdmin,EasyHbase工具集具備最高上上百T存儲儲容量DataNode+JobTracker4U45個磁盤180T存儲儲=5w實現(xiàn)高性價價比集群命名節(jié)點(NameNode)高密度計算算高密度存儲儲DataNode10TDataNode10TDataNode10TDataNode10TDataNode180TDataNode180T/data//back/集群內(nèi)遷移移12/31/2022Easy(Red)Hadoop社社區(qū)產(chǎn)產(chǎn)品線Hive平臺化化EasyHaoop版版和Hadoop開源源版的區(qū)區(qū)別EasyHadoopappsManager[Hadoopapp安安裝管理理平臺,解決Hadoopapps管管理問題題]集成軟件件有:-EasyHadoop發(fā)發(fā)行版[解決決Hadoop穩(wěn)定性性和兼容容性問題題]-Easy