1.5發(fā)展歷程
       機(jī)器學(xué)習(xí)是人工智能(artificial intelligence)研究發(fā)展到一定階段的必然產(chǎn)物．二十世紀(jì)五十年代到七十年代初，人工智能研究處于“推理期”，那時(shí)人們以為只要能賦予機(jī)器邏輯推理能力，機(jī)器就能具有智能，這一階段的代表性工作主要有A. Newell和H. Simon的“邏輯理論家”(Logic Theorist)程序以及此后的“通用問(wèn)題求解”(General Problem Solving)程序等，這些工作在當(dāng)時(shí)取得了令人振奮的結(jié)果，例如，“邏輯理論家”程序在1952年證明了著名數(shù)學(xué)家羅素和懷特海的名著《數(shù)學(xué)原理》中的38條定理，在1963年證明了全部52條定理，特別值得一提的是，定理2.85甚至比羅素和懷特海證明得更巧妙．A．Newell和H. Simon因?yàn)檫@方面的工作獲得了1975年圖靈獎(jiǎng)．然而，隨著研究向前發(fā)展，人們逐漸認(rèn)識(shí)到，僅具有邏輯推理能力是遠(yuǎn)遠(yuǎn)實(shí)現(xiàn)不了人工智能的．E．A. Feigenbaum等人認(rèn)為，要使機(jī)器具有智能，就必須設(shè)法使機(jī)器擁有知識(shí)．在他們的倡導(dǎo)下，從二十世紀(jì)七十年代中期開始，人工智能研究進(jìn)入了“知識(shí)期”．在這一時(shí)期，大量專家系統(tǒng)問(wèn)世，在很多應(yīng)用領(lǐng)域取得了大量成果．E．A．Feigenbaum作為“知識(shí)工程”之父在1994年獲得圖靈獎(jiǎng)，但是，人們逐漸認(rèn)識(shí)到，專家系統(tǒng)面臨“知識(shí)工程瓶頸”，簡(jiǎn)單地說(shuō)，就是由人來(lái)把知識(shí)總結(jié)出來(lái)再教給計(jì)算機(jī)是相當(dāng)困難的．于是，一些學(xué)者想到，如果機(jī)器自己能夠?qū)W習(xí)知識(shí)該多好！