統(tǒng)計(jì)學(xué)是通過(guò)搜索、整理、分析、描述數(shù)據(jù)等手段，以達(dá)到推斷所測(cè)對(duì)象的本質(zhì)，甚至預(yù)測(cè)對(duì)象未來(lái)的一門綜合性科學(xué)。其中用到了大量的數(shù)學(xué)及其它學(xué)科的專業(yè)知識(shí)，它的使用范圍幾乎覆蓋了社會(huì)科學(xué)和自然科學(xué)的各個(gè)領(lǐng)域。
統(tǒng)計(jì)學(xué)的英文statistics最早源于現(xiàn)代拉丁文statisticum collegium（國(guó)會(huì)）以及意大利文statista（國(guó)民或政治家）。德文Statistik，最早是由Gottfried Achenwall于1749年使用，代表對(duì)國(guó)家的資料進(jìn)行分析的學(xué)問(wèn)，也就是“研究國(guó)家的科學(xué)”。在十九世紀(jì)統(tǒng)計(jì)學(xué)在廣泛的數(shù)據(jù)以及資料中探究其意義，并且由John Sinclair引進(jìn)到英語(yǔ)世界。
統(tǒng)計(jì)學(xué)是一門很古老的科學(xué)，一般認(rèn)為其學(xué)理研究始于古希臘的亞里斯多德時(shí)代，迄今已有兩千三百多年的歷史。它起源于研究社會(huì)經(jīng)濟(jì)問(wèn)題，在兩千多年的發(fā)展過(guò)程中，統(tǒng)計(jì)學(xué)至少經(jīng)歷了“城邦政情”，“政治算數(shù)”和“統(tǒng)計(jì)分析科學(xué)”三個(gè)發(fā)展階段。所謂“數(shù)理統(tǒng)計(jì)”并非獨(dú)立于統(tǒng)計(jì)學(xué)的新學(xué)科，確切地說(shuō)：它是統(tǒng)計(jì)學(xué)在第三個(gè)發(fā)展階段所形成的所有收集和分析數(shù)據(jù)的新方法的一個(gè)綜合性名詞。概率論是數(shù)理統(tǒng)計(jì)方法的理論基礎(chǔ)，但是它不屬于統(tǒng)計(jì)學(xué)的范疇，而屬于數(shù)學(xué)的范疇。
