01-1-2 自然語言處理的概念及發(fā)展歷程

自然語言處理基礎(chǔ)Python自然語言處理第一章02自然語言處理的發(fā)展歷程CONTENT目錄

01什么是自然語言處理04探討自然語言處理的幾個層面03自然語言處理相關(guān)知識的構(gòu)成05自然語言處理與人工智能什么是自然語言處理01自然語言處理的概念自然語言處理研究任務(wù)自然語言處理的概念機(jī)器索菲亞與人類對話自然語言處理的概念索菲亞工作邏輯圖大致如下：自然語言處理的概念自然語言處理是人工智能和語言學(xué)交叉領(lǐng)域下的分支學(xué)科，同時也是計算機(jī)科學(xué)領(lǐng)域以及人工智能領(lǐng)域的一個重要研究方向。自然語言處理研究用計算機(jī)來處理、理解以及運(yùn)用人類語言（如中文、英文、日文等），從而達(dá)到人與計算機(jī)之間的有效通訊。自然語言處理的概念自然語言處理包含很多學(xué)科：自然語言理解所謂自然語言理解，就是使計算機(jī)理解自然語言（人類語言文字）等，重在理解。具體來說，就是理解語言、文本等，提取出有用的信息，用于下游的任務(wù)?？梢允鞘棺匀徽Z言結(jié)構(gòu)化，比如分詞、詞性標(biāo)注、句法分析等；也可以是表征學(xué)習(xí)，字、詞、句子的向量表示，構(gòu)建文本表示的文本分類；還可以是信息提取，如信息檢索，又如信息抽?。麑嶓w提取、關(guān)系抽取、事件抽取等）。自然語言生成提供結(jié)構(gòu)化的數(shù)據(jù)、文本、圖表、音頻、視頻等，生成人類可以理解的自然語言形式的文本。自然語言生成又可以分為三大類：文本到文本（如翻譯、摘要等）、文本到其他（如文本生成圖片）、其他到文本（如視頻生成文本）。什么是自然語言處理01自然語言處理的概念自然語言處理研究任務(wù)機(jī)器翻譯方面的研究情感分析方向的研究百度AI情感分析系統(tǒng)智能問答方向的研究圖靈機(jī)器人：可以進(jìn)行注冊并領(lǐng)養(yǎng)機(jī)器人。自然語言處理的研究任務(wù)文摘生成：計算機(jī)能夠準(zhǔn)確歸納、總結(jié)文本產(chǎn)生文本摘要。文本分類：計算機(jī)采集各種文本，進(jìn)行主題分析，將文本分類為預(yù)定義的類別的過程。垃圾郵件分類、新聞文章分類都是文本分類應(yīng)用案例。02自然語言處理的發(fā)展歷程自然語言處理的發(fā)展歷程三個階段：

萌芽期（1）1956年以前，是自然語言處理的基礎(chǔ)研究階段。（2）這一時期，機(jī)器翻譯的社會需求，促使了很多自然語言處理的基礎(chǔ)研究。（3）除了基礎(chǔ)研究之外，這一時期還取得一些矚目的成果?？焖侔l(fā)展期（1）20世紀(jì)80年代初，很多學(xué)者開始反思有限狀態(tài)模型和經(jīng)驗主義方法的合理性，話語分析取得重大進(jìn)步。（2）20世紀(jì)90年代，兩件事件的發(fā)展促進(jìn)了自然語言處理研究的復(fù)蘇和發(fā)展。（3）20世紀(jì)90年代末到21世紀(jì)初，人們逐漸意識到自然語言處理僅是基于規(guī)則或統(tǒng)計的方法是不夠的。突飛猛進(jìn)期21世紀(jì)以后，自然語言處理突飛猛進(jìn)的發(fā)展。2006年，設(shè)計出第一個多層神經(jīng)網(wǎng)絡(luò)算法——深度學(xué)習(xí)，這在一定程度上解決了人類處理“抽象概念”的難題。目前，深度學(xué)習(xí)在機(jī)器翻譯、問答系統(tǒng)等多個自然語言處理任務(wù)中都取得了很好的成績。作為人工智能的重要研究領(lǐng)域，深度學(xué)習(xí)未來必將在自然語言處理領(lǐng)域發(fā)揮日益重要的作用。小結(jié)