描述
內容簡介
|
☆★☆好評熱銷再上市☆★☆
★打不過AI就加入他！建立自己的GPT產品 ★手刻ChatGPT從NLP基礎開始 ★PyTorch親手打造RNN、LSTM、GRU、BERT、GPT ★Attention、Transformer詳解 ★用GPT做出自動詩詞創作平台
全書分為4篇：「自然語言處理基礎篇」、「PyTorch入門篇」、「用PyTorch完成自然語言處理任務篇」和「實戰篇」。 第1篇包含自然語言處理的背景知識、常用的開放資源、架設Python環境以及使用Python完成自然語言處理的基礎任務。 第2篇包含PyTorch環境設定和PyTorch的基本使用，以及機器學習的一些基本原理和工作方法。 第3篇介紹如何使用PyTorch完成自然語言處理任務，各介紹一種模型，包括分詞(又稱斷詞)、RNN、詞嵌入、Seq2seq、注意力機制、Transformer、預訓練語言模型。 第4篇是實戰篇，第分別講解自然語言理解的任務和自然語言生成的任務，即「中文地址解析」和「詩句補充」。這兩個任務綜合了前面各章的知識，並展示了從資料下載、處理、模型到使用者互動介面開發的全部流程。 從入門到專案實戰，打下你在NLP這一門最紅技術上的紮實基礎。
☘ 目標讀者 ■有一定程式設計基礎的電腦同好。 ■希望學習機器學習和自然語言處理的人。 ■電腦及其相關專業的學生。 ■對自然語言處理領域感興趣的研究者。 ■對自然語言處理感興趣並樂於實踐的人。 |
作者簡介
| 孫小文
畢業於北京郵電大學計算機學院(國家示範性軟件學院)，目前就職於微軟(中國)，研究領域包括自然語言處理、分佈式存儲和計算、搜索技術。
王薪宇 畢業於北京郵電大學計算機學院(國家示範性軟件學院)，曾在知名互聯網公司工作，主要研究領域為自然語言處理。
楊談 北京郵電大學計算機學院(國家示範性軟件學院)副教授，作為主研人或項目負責人參與了多個國家項目和企業合作項目。 |
目錄
|
序
| 序
自然語言處理是目前人工智慧領域中最受人矚目的研究方向之一，發展非常迅速。自然語言處理又是一個非常開放的領域，每年都有大量的可以免費閱讀的論文、可以自由下載和使用的開原始程式碼被發佈在網際網路上。感謝這些致力於自然語言處理研究，又樂於分享的研究者和開發者，使我們有機會學習這一領域最新的研究成果，理解自然語言處理領域中的精妙原理，並能夠在開原始程式碼函式庫的基礎上建立一些美妙的應用。
如果沒有他們的努力和奉獻，無法想像我們僅僅透過兩行程式 ，就能在幾秒內定義和建立一個包含超過1億參數的模型，並下載和載入預訓練參數（耗時數分鐘，具體時間根據網速而定）。這些預訓練參數往往是使用性能強大的圖形處理單元（Graphics Processing Unit, GPU）在巨量的資料中訓練數天才能得到的。
即使擁有性能強大的GPU，要獲取巨量訓練資料，或者進行長時間的訓練也都是困難的，但是借助公開發佈的預訓練權重，僅僅需要兩行程式就都可以做到。同時還可以在能接受的時間內對模型進行Fine-tuning（微調）訓練，載入與訓練參數後，再使用目標場景的資料訓練，使模型更符合實際的應用場景。
如果你沒有 GPU，或者只有一台性能一般的家用電腦，也完全可以比較快速地使用模型去完成一些通用的任務，或者在一定的資料中訓練一些不太複雜的模型。
自然語言處理越來越豐富的應用正在改變我們的生活。從語音合成、語音辨識、機器翻譯，到視覺文字聯合，越來越精確的自然語言理解讓更多事情成為可能。現在的人工智慧技術使電腦可以用越來越接近人類的方式去處理和使用自然語言。
更令人興奮的是，這些事情我們也可以借助開原始程式碼去實作，並根據大量公開的論文、文件和範例程式去理解程式背後的原理。 |
