一文告訴你自然語言資料分析NLA發展簡史

技術創新已成為企業競爭中的主導內容，已逐漸替代商品和價格，成為各國、地區、企業參與經濟競爭和市場競爭的重要手段。近期，Smartbi獲得了一項發明專利——自然語言分析 （NLA）。

 

NLA是什麼？自然語言分析，簡稱NLA，是以NLP為基礎，將處理結果運用到資料分析軟體，最後利用自然語言查詢、分析資訊系統中的資料。簡單地說，NLA使使用者通過自然語言迅速獲取分析資料。

 

下面來說說NLP。

 

一、概念

自然語言處理，即NLP是指利用計算機來處理、理解和使用人類語言。自然語言是人類區別其它生物的本質特徵，沒有了語言，就沒有人類的思維。因此 NLP就是人工智慧的最終目標。這意味著，想要真正地達到智慧，計算機必須擁有能夠處理自然語言的功能。

從技術上講， NLP包括序列標註、任務分類、句子關係判斷和產生任務等。NLP在實際應用中有著廣闊的應用前景，包括機器翻譯，資訊檢索，資訊抽取和過濾，文字分類和聚類，輿論分析，意見挖掘等。

NLP的出現與機器翻譯息息相關。當“人工智慧”被正式提出的時候，它的創立者們將電腦下棋和機器翻譯當作了兩項重要的工作，他們相信，如果國際象棋系統戰勝了人類的冠軍，並且讓機器翻譯系統達到了人類的水平，那麼人工智慧就會獲得成功。IBM的深藍超級電腦於1997年擊敗世界棋王卡斯帕羅夫。但至今為止，機器翻譯還不能與人類的翻譯水平相提並論，可見 NLP的難度有多大！

 

二、發展趨勢

目前，以自然語言處理為研究物件的研究有兩種，一種是以規則為基礎的理性主義，一種是以統計學為基礎的實證研究。理性主義認為，人類的語言主要是通過語言規則來產生和表達，所以如果人們能夠可以通過恰當的表達方式來表示人類的語言，就能實現翻譯語言等 NLP任務。而經驗主義則主張從語言資料中獲得語言統計知識，並對其進行有效的統計建模。所以，只要有足夠的統計資料，就可以聽懂人類的語言。但是，在現實世界中，兩者都存在著諸多的不確定性。比如，人類語言在現實使用過程中存在噪聲。理性主義方法最大的缺點是一旦偏離規則，就無法有效處理。而經驗主義的研究方法，由於無法獲得大量的語言資料來進行統計學習，所以也不可能完全瞭解人類的語言。自二十世紀80年代起，以語言規律為基礎的理性主義方法遭到了越來越多的質疑，大量的語言資料處理已經成為當前和今後的一個重要課題。在自然語言處理中，計算機自動學習已成為人們關注的焦點。