回歸分析的基本思想第1頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月3.1回歸分析的基本思想及其初步應(yīng)用（一）高二數(shù)學(xué)選修2-3

第2頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月7/10/2023兩個(gè)變量的關(guān)系不相關(guān)相關(guān)關(guān)系函數(shù)關(guān)系線性相關(guān)非線性相關(guān)現(xiàn)實(shí)生活中兩個(gè)變量間的關(guān)系:相關(guān)關(guān)系：對(duì)于兩個(gè)變量，當(dāng)自變量取值一定時(shí)，因變量的取值帶有一定隨機(jī)性的兩個(gè)變量之間的關(guān)系.函數(shù)關(guān)系中的兩個(gè)變量間是一種確定性關(guān)系相關(guān)關(guān)系是一種非確定性關(guān)系函數(shù)關(guān)系是一種理想的關(guān)系模型相關(guān)關(guān)系在現(xiàn)實(shí)生活中大量存在，是更一般的情況第3頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月表示有一組具體的數(shù)據(jù)估計(jì)得到的截距和斜率;a,b,y表示真實(shí)值;表示由真實(shí)值a,b所確定的值.表示由估計(jì)值所確定的值.第4頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月這種方法稱為回歸分析.兩個(gè)具有線性相關(guān)關(guān)系的變量的統(tǒng)計(jì)分析：（1）畫(huà)散點(diǎn)圖；（2）求回歸直線方程(最小二乘法)：（3）利用回歸直線方程進(jìn)行預(yù)報(bào)；回歸分析是對(duì)具有相關(guān)關(guān)系的兩個(gè)變量進(jìn)行統(tǒng)計(jì)分析的一種常用方法.為樣本點(diǎn)的中心樣本點(diǎn)：第5頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

2008年5月，中共中央國(guó)務(wù)院關(guān)于加強(qiáng)青少年體育、增強(qiáng)青少年體質(zhì)的意見(jiàn)指出城市超重和肥胖青少年的比例明顯增加.“身高標(biāo)準(zhǔn)體重”該指標(biāo)對(duì)于學(xué)生形成正確的身體形態(tài)觀具有非常直觀的教育作用.“身高標(biāo)準(zhǔn)體重”從何而來(lái)？我們?cè)鯓尤パ芯?創(chuàng)設(shè)情境：第6頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月某大學(xué)中隨機(jī)選取8名女大學(xué)生，其身高和體重?cái)?shù)據(jù)如下表所示.編號(hào)12345678身高/cm165165157170175165155170體重/kg4857505464614359求根據(jù)女大學(xué)生的身高預(yù)報(bào)體重的回歸方程，并預(yù)報(bào)一名身高為172cm的女大學(xué)生的體重.第7頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月解：取身高為解釋變量x，體重為預(yù)報(bào)變量y，作散點(diǎn)圖：樣本點(diǎn)呈條狀分布，身高和體重有較好的線性相關(guān)關(guān)系，因此可以用回歸方程來(lái)近似的刻畫(huà)它們之間的關(guān)系.第8頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月由得：故所求回歸方程為：因此，對(duì)于身高172cm的女大學(xué)生，由回歸方程可以預(yù)報(bào)其體重為：是斜率的估計(jì)值，說(shuō)明身高x每增加1個(gè)單位時(shí)，體重y就增加0.849個(gè)單位，這表明體重與身高具有正的線性相關(guān)關(guān)系.如何描述它們之間線性相關(guān)關(guān)系的強(qiáng)弱？第9頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月相關(guān)系數(shù)相關(guān)系數(shù)的性質(zhì)(1)|r|≤1．(2)|r|越接近于1，相關(guān)程度越強(qiáng)；|r|越接近于0，相關(guān)程度越弱．注:b與r同號(hào)問(wèn)題：達(dá)到怎樣程度，x、y線性相關(guān)呢？它們的相關(guān)程度怎樣呢？r第10頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月相關(guān)系數(shù)ｒ＞０正相關(guān)；ｒ＜０負(fù)相關(guān)．通常：r∈[-1,-0.75]--負(fù)相關(guān)很強(qiáng);r∈[0.75,1]—正相關(guān)很強(qiáng);r∈[-0.75,-0.3]--負(fù)相關(guān)一般;r∈[0.3,0.75]—正相關(guān)一般;r∈[-0.25,0.25]--相關(guān)性較弱;對(duì)r進(jìn)行顯著性檢驗(yàn)r第11頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月某大學(xué)中隨機(jī)選取8名女大學(xué)生，其身高和體重?cái)?shù)據(jù)如下表所示.編號(hào)12345678身高/cm165165157170175165155170體重/kg4857505464614359求根據(jù)女大學(xué)生的身高預(yù)報(bào)體重的回歸方程，并預(yù)報(bào)一名身高為172cm的女大學(xué)生的體重.故所求回歸方程為：r=0.798表明體重與身高有很強(qiáng)的線性相關(guān)性，從而說(shuō)明我們建立的回歸模型是有意義的.認(rèn)為她的平均體重的估計(jì)值是60.316kg.第12頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月因?yàn)樗械臉颖军c(diǎn)不共線，所以線性函數(shù)模型只能近似地刻畫(huà)身高和體重之間的關(guān)系，即：體重不僅受身高的影響，還受其他因素的影響，把這種影響的結(jié)果用e來(lái)表示，從而把線性函數(shù)模型修改為線性回歸模型：y=bx+a+e.其中，e包含體重不能由身高的線性函數(shù)解釋的所有部分.第13頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月線性回歸模型其中a和b為模型的未知參數(shù)，e是y與之間的誤差，通常e為隨機(jī)變量，稱為隨機(jī)誤差.均值E(e)=0，方差D(e)=σ2>0線性回歸模型的完整表達(dá)式為：線性回歸模型適用范圍比一次函數(shù)的適用范圍大得多.當(dāng)隨機(jī)誤差e恒等于0時(shí)，線性回歸模型就變成一次函數(shù)模型.即：一次函數(shù)模型是線性回歸模型的特殊形式，線性回歸模型是一次函數(shù)模型的一般形式.第14頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月隨機(jī)誤差是引起預(yù)報(bào)值與真實(shí)值y之間的誤差的原因之一，其大小取決于隨機(jī)誤差的方差.和為截距和斜率的估計(jì)值，它們與真實(shí)值a和b之間存在誤差是引起預(yù)報(bào)值與真實(shí)值y之間的誤差的另一個(gè)原因.第15頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月隨機(jī)誤差e的主要來(lái)源：（1）用線性回歸模型近似真實(shí)模型（真實(shí)模型是客觀存在的，但我們并不知道到底是什么）所引起的誤差.可能存在非線性的函數(shù)能更好的描述y與x之間的關(guān)系，但我們現(xiàn)在卻用線性函數(shù)來(lái)表述這種關(guān)系，結(jié)果就產(chǎn)生誤差，這種由于模型近似所引起的誤差包含在e中.（2）忽略了某些因素的影響.影響變量y的因素不止變量x一個(gè)，可能還有其他因素，但通常它們每一個(gè)因素的影響可能都比較小，它們的影響都體現(xiàn)在e中.（3）觀測(cè)誤差.由于測(cè)量工具等原因，得到的y的觀測(cè)值一般是有誤差的，這樣的誤差也包含在e中.以上三項(xiàng)誤差越小，則回歸模型的擬合效果越好.第16頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月在線性回歸模型中，e是用預(yù)報(bào)真實(shí)值y的誤差，它是一個(gè)不可觀測(cè)的量，那么該怎樣研究隨機(jī)誤差，如何衡量預(yù)報(bào)的精度？由于隨機(jī)誤差e的均值為0，故采用方差來(lái)衡量隨機(jī)誤差的大小.第17頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

假設(shè)1:身高和隨機(jī)誤差的不同不會(huì)對(duì)體重產(chǎn)生任何影響，54.554.554.554.554.554.554.554.5體重/kg170155165175170157165165身高/cm87654321編號(hào)54.5kg怎樣研究隨機(jī)誤差？第18頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月5943616454505748體重/kg170155165175170157165165身高/cm87654321編號(hào)

例如，編號(hào)為6的女大學(xué)生的體重并沒(méi)有落在水平直線上，她的體重為61kg。解釋變量（身高）和隨機(jī)誤差共同把這名學(xué)生的體重從54.5kg“推”到了61kg，相差6.5kg，所以6.5kg是解釋變量和隨機(jī)誤差的組合效應(yīng)。用這種方法可以對(duì)所有預(yù)報(bào)變量計(jì)算組合效應(yīng)。數(shù)學(xué)上，把每個(gè)效應(yīng)（觀測(cè)值減去總的平均值）的平方加起來(lái)，即用表示總的效應(yīng)，稱為總偏差平方和。第19頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月5943616454505748體重/kg170155165175170157165165身高/cm87654321編號(hào)

假設(shè)2:隨機(jī)誤差對(duì)體重沒(méi)有影響，也就是說(shuō)，體重僅受身高的影響，那么散點(diǎn)圖中所有的點(diǎn)將完全落在回歸直線上。怎樣研究隨機(jī)誤差？第20頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

因此，數(shù)據(jù)點(diǎn)和它在回歸直線上相應(yīng)位置的差異是隨機(jī)誤差的效應(yīng)，稱為殘差。例如，編號(hào)為6的女大學(xué)生，計(jì)算隨機(jī)誤差的效應(yīng)（殘差）為：對(duì)每名女大學(xué)生計(jì)算這個(gè)差異，然后分別將所得的值平方后加起來(lái)，用數(shù)學(xué)符號(hào)稱為殘差平方和，它代表了隨機(jī)誤差的效應(yīng)。表示為：第21頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月隨機(jī)誤差e的估計(jì)量樣本點(diǎn)：相應(yīng)的隨機(jī)誤差為：隨機(jī)誤差的估計(jì)值為：稱為相應(yīng)于點(diǎn)的殘差.的估計(jì)量為稱為殘差平方和.第22頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月殘差分析在研究?jī)蓚€(gè)變量間的關(guān)系時(shí)，首先要根據(jù)散點(diǎn)圖來(lái)粗略判斷它們是否是線性相關(guān)，是否可以用線性回歸模型來(lái)擬合數(shù)據(jù).然后，可以通過(guò)殘差來(lái)判斷模型擬合的效果，判斷原始數(shù)據(jù)中是否存在可疑數(shù)據(jù).這方面的分析工作稱為殘差分析.第23頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月0.382-2.8836.6271.137-4.6182.4192.627-6.373殘差5943616454505748體重/kg170155165175170157165165身高/cm87654321編號(hào)下表為女大學(xué)生身高和體重的原始數(shù)據(jù)以及相應(yīng)的殘差數(shù)據(jù)：?e以縱坐標(biāo)為殘差，橫坐標(biāo)為編號(hào)，作出圖形（殘差圖）來(lái)分析殘差特性.第24頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

問(wèn)題：如何發(fā)現(xiàn)數(shù)據(jù)中的錯(cuò)誤？(1)我們可以通過(guò)分析發(fā)現(xiàn)原始數(shù)據(jù)中的可疑數(shù)據(jù)，判斷建立模型的擬合效果。第25頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

殘差圖的制作和作用：制作：坐標(biāo)縱軸為殘差變量，橫軸可以有不同的選擇.

橫軸為編號(hào)：可以考察殘差與編號(hào)次序之間的關(guān)系，常用于調(diào)查數(shù)據(jù)錯(cuò)誤.

橫軸為解釋變量：可以考察殘差與解釋變量的關(guān)系，常用于研究模型是否有改進(jìn)的余地.作用：判斷模型的適用性若模型選擇的正確，殘差圖中的點(diǎn)應(yīng)該分布在以橫軸為中心的帶形區(qū)域.問(wèn)題：如何發(fā)現(xiàn)數(shù)據(jù)中的錯(cuò)誤？第26頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月殘差圖的制作及作用。坐標(biāo)縱軸為殘差變量，橫軸可以有不同的選擇；若模型選擇的正確，殘差圖中的點(diǎn)應(yīng)該分布在以橫軸為心的帶形區(qū)域；對(duì)于遠(yuǎn)離橫軸的點(diǎn)，要特別注意。身高與體重殘差圖異常點(diǎn)錯(cuò)誤數(shù)據(jù)模型問(wèn)題

幾點(diǎn)說(shuō)明：第一個(gè)樣本點(diǎn)和第6個(gè)樣本點(diǎn)的殘差比較大，需要確認(rèn)在采集過(guò)程中是否有人為的錯(cuò)誤。如果數(shù)據(jù)采集有錯(cuò)誤，就予以糾正，然后再重新利用線性回歸模型擬合數(shù)據(jù)；如果數(shù)據(jù)采集沒(méi)有錯(cuò)誤，則需要尋找其他的原因。另外，殘差點(diǎn)比較均勻地落在水平的帶狀區(qū)域中，說(shuō)明選用的模型計(jì)較合適，這樣的帶狀區(qū)域的寬度越窄，說(shuō)明模型擬合精度越高，回歸方程的預(yù)報(bào)精度越高。第27頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月我們可以用相關(guān)指數(shù)R2來(lái)刻畫(huà)回歸的效果，其計(jì)算公式是如何衡量預(yù)報(bào)的精度？顯然，R2的值越大，說(shuō)明殘差平方和越小，也就是說(shuō)模型擬合效果越好。

如果某組數(shù)據(jù)可能采取幾種不同回歸方程進(jìn)行回歸分析，則可以通過(guò)比較R2的值來(lái)做出選擇，即選取R2較大的模型作為這組數(shù)據(jù)的模型。第28頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

1354總計(jì)0.36128.361殘差變量0.64225.639隨機(jī)誤差比例平方和來(lái)源從上中可以看出，解析變量對(duì)總效應(yīng)約貢獻(xiàn)了64%，即R20.64，可以敘述為“身高解析了64%的體重變化”，而隨機(jī)誤差貢獻(xiàn)了剩余的36%。所以，身高對(duì)體重的效應(yīng)比隨機(jī)誤差的效應(yīng)大得多。問(wèn)題：如何衡量隨機(jī)模型的擬合效果？下面我們用相關(guān)指數(shù)分析一下例1：第29頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

問(wèn)題：結(jié)合例1思考：用回歸方程預(yù)報(bào)體重時(shí)應(yīng)注意什么？用身高預(yù)報(bào)體重時(shí)應(yīng)注意的問(wèn)題：1.回歸方程只適用于我們所研究的樣本的總體。2.我們建立的回歸方程一般都有時(shí)間性。3.樣本取值的范圍會(huì)影響回歸方程的適用范圍。4.不能期望回歸方程得到的預(yù)報(bào)值就是預(yù)報(bào)變量的精確值。涉及到統(tǒng)計(jì)的一些思想：模型適用的總體；模型的時(shí)間性；樣本的取值范圍對(duì)模型的影響；模型預(yù)報(bào)結(jié)果的正確理解。第30頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

一般地，建立回歸模型的基本步驟為：（1）確定研究對(duì)象，明確哪個(gè)變量是解釋變量，哪個(gè)變量是預(yù)報(bào)變量。（2）畫(huà)出確定好的解釋變量和預(yù)報(bào)變量的散點(diǎn)圖，觀察它們之間的關(guān)系（如是否存在線性關(guān)系等）。（3）由經(jīng)驗(yàn)確定回歸方程的類型（如我們觀察到數(shù)據(jù)呈線性關(guān)系，則選用線性回歸方程y=bx+a）.（4）按一定規(guī)則估計(jì)回歸方程中的參數(shù)（如最小二乘法）。（5）得出結(jié)果后分析殘差圖是否有異常（個(gè)別數(shù)據(jù)對(duì)應(yīng)殘差過(guò)大，或殘差呈現(xiàn)不隨機(jī)的規(guī)律性，等等），若存在異常，則檢查數(shù)據(jù)是否有誤，或模型是否合適等。問(wèn)題：歸納建立回歸模型的基本步驟。第31頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

問(wèn)題六：若兩個(gè)變量呈現(xiàn)非線性關(guān)系，如何解決？（分析例2）例2

一只紅鈴蟲(chóng)的產(chǎn)卵數(shù)y和溫度x有關(guān)?，F(xiàn)收集了7組觀測(cè)數(shù)據(jù)列于表中：溫度xoC21232527293235產(chǎn)卵數(shù)y/個(gè)711212466115325（1）試建立產(chǎn)卵數(shù)y與溫度x之間的回歸方程；并預(yù)測(cè)溫度為28oC時(shí)產(chǎn)卵數(shù)目。（2）你所建立的模型中溫度在多大程度上解釋了產(chǎn)卵數(shù)的變化？第32頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

選變量解：選取氣溫為解釋變量x，產(chǎn)卵數(shù)為預(yù)報(bào)變量y。畫(huà)散點(diǎn)圖假設(shè)線性回歸方程為：?=bx+a選模型分析和預(yù)測(cè)當(dāng)x=28時(shí)，y=19.87×28-463.73≈93估計(jì)參數(shù)由計(jì)算器得：線性回歸方程為y=19.87x-463.73相關(guān)指數(shù)R2=r2≈0.8642=0.7464所以，一次函數(shù)模型中溫度解釋了74.64%的產(chǎn)卵數(shù)變化。050100150200250300350036912151821242730333639當(dāng)x=28時(shí)，y=19.87×28-463.73≈93方法一：一元函數(shù)模型問(wèn)題六：若兩個(gè)變量呈現(xiàn)非線性關(guān)系，如何解決？（分析例2）第33頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

y=c1

x2+c2

變換y=c1

t+c2

非線性關(guān)系線性關(guān)系問(wèn)題１選用y=c1x2+c2，還是y=c1x2+cx+c2？問(wèn)題3

產(chǎn)卵數(shù)氣溫問(wèn)題2如何求c1、c2？

t=x2方法二，二元函數(shù)模型問(wèn)題六：若兩個(gè)變量呈現(xiàn)非線性關(guān)系，如何解決？（分析例2）第34頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

平方變換：令t=x2，產(chǎn)卵數(shù)y和溫度x之間二次函數(shù)模型y=bx2+a就轉(zhuǎn)化為產(chǎn)卵數(shù)y和溫度的平方t之間線性回歸模型y=bt+a溫度21232527293235溫度的平方t44152962572984110241225產(chǎn)卵數(shù)y/個(gè)711212466115325作散點(diǎn)圖，并由計(jì)算器得：y和t之間的線性回歸方程為y=0.367t-202.54，相關(guān)指數(shù)R2=r2≈0.8962=0.802將t=x2代入線性回歸方程得：y=0.367x2-202.54當(dāng)x=28時(shí)，y=0.367×282-202.54≈85，且R2=0.802，所以，二次函數(shù)模型中溫度解釋了80.2%的產(chǎn)卵數(shù)變化。t問(wèn)題六：若兩個(gè)變量呈現(xiàn)非線性關(guān)系，如何解決？（分析例2）第35頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

產(chǎn)卵數(shù)氣溫變換y=bx+a非線性關(guān)系線性關(guān)系對(duì)數(shù)問(wèn)題六：若兩個(gè)變量呈現(xiàn)非線性關(guān)系，如何解決？（分析例2）方法三：指數(shù)函數(shù)模型第36頁(yè)，課件共39頁(yè)，創(chuàng)作于2023年2月

溫度xoC21232527293235z=lgy0.851.041.321.381.822.062.51產(chǎn)卵數(shù)y/個(gè)711212466