Practical Natural Language Processing

「許多偉大的書籍專門探討基礎的ML演算法，但這本書揭露真實系統的結構。對渴望實際建構和部署NLP的專業人士而言，本書具備無可估量的價值。」—Zachary LiptonCarnegie Mellon大學助理教授，Amazon AI科學家，《Dive into Deep Learning》作者很多著作和課程都使用簡單的案例和定義良好的資料組來處理自然語言處理(NLP)問題，但是，如果你想

這是一本自然語言處理理論和實踐完美結合的教材。讀者在瞭解自然語言處理全貌的同時，可以根據本書的一些實踐案例快速上手並應用於自己的項目中。作者結合自己的實踐經驗，重點介紹了真實場景下快速構建一些自然語言處理項目所需的技能，並提供了一些工具推薦或算法實現。本書著眼于實際應用場景，主要介紹了分詞、詞性標注和名實體識別、句法分析等基本技術，並通過剖析近年來在自然語言處理領域大放光彩的深度學習技術，力求快速

▍GPT、Transformer、attention / self-attention 機制、seq2seq 架構...，大型語言模型 (LLM) 背後的建模技術「硬派」揭密！▍AI 界扛霸子 NVIDIA 的指定教材！近年來，在 NVIDIA (輝達) GPU、CUDA 技術的推波助瀾下，大型語言模型 (LLM) 的發展有著爆炸性的成長，例如最為人知的 ChatGPT 正是運用深度學習 (Deep Learning) 技術打造而成的熱門 LLM 應用。□【★徹底看懂 LLM 核心建模技術 - GPT、Transformer 的模型架構】自從 ChatGPT 爆紅之後，LLM 建模技術一直是熱門的研究話題，ChatGPT 的背後核心是 GPT 模型，而 GPT 裡面最重要的技術就是最後那個「T」- 也就是大名鼎鼎、使用了 attention (注意力) 機制的 Transformer 模型，這當中所用的建模技術可說是一環扣一環，也容易讓初學者學起來暈得不得了，只要一個關鍵地方沒搞懂，後面就全花了...為此，本書經過精心設計，是帶你看懂 GPT、Transformer、attention...這些 LLM 關鍵技術的最佳救星！本書設計了「環環相扣」的 NLP 章節內容，循序漸進介紹 LLM 的基礎建模技術：🔹看懂循環神經網路 (RNN、LSTM) 的缺點就知道為什麼需要 attention 機制以及 seq2seq 架構🔹看懂 attention 機制就能看懂 Transformer 的 self-attention 神經層🔹看懂 seq2seq 架構就能看懂 Transformer 的 encoder-decoder 架構🔹看懂 Transformer 就能看懂 GPT你可以深刻感受到次一章的模型架構幾乎都是為了解決前一章模型的不足之處而誕生的，經此一輪學習下來，保證讓你對 GPT、Transformer、attention / self-attention 等技術清清楚楚！這絕對是其他書看不到的精彩內容！【★學 LLM 基礎，跟 AI 重要推手 - NVIDIA 學最到位！】NVIDIA 除了在硬體上為 AI 帶來助益外，為了幫助眾多初學者快速上手 LLM 用到的深度學習基礎，任職於 NVIDIA 的本書作者 Magnus Ekman 凝聚了他多年來在 N

本書採用創新且實用的教學策略，巧妙融合理論基礎與實踐應用，深入剖析自然語言處理(Natural Language Processing，NLP)領域的新進展，以及大語言模型(Large Language Model，LLM)的原理。書中不僅系統闡述了?LLM?的理論基礎，還通過實際項目案例展示了如何將這些模型應用於構建RAG系統。本書遵循由淺入深的路徑，從LLM的基礎知識入手，詳細闡釋了模型的訓練流程，並深入探討了如何利用提示技術與模型進行高效交互。書中還重點介紹了兩個在業界得到廣泛認可的框架—LlamaIndex和LangChain，它們是開發RAG應用的強大工具。書中的項目案例不僅為讀者提供了寶貴的實踐經驗，也能夠加深讀者對相關概念的理解和應用。此外，書中進一步探討了包括智能體和微調在內的高級技術，這些技術能夠顯著提升問答系統的性能。

NLP專用Python開發環境架設自然語言處理的發展歷程無監督學習的原理與應用及實作Pretraing的完整實作文字分類、機器閱讀理解、命名實體辨識ChatGPT的原理 - 文字生成損失函式與模型瘦身大型語言模型已經成為現代AI的範式，不管是ChatGPT或是llama、Falcon等，這個新興學科是人工智慧時代最熱門的話題，沒有一個有志於AI的人可以忽略這個趨勢。而大型語言模型的基礎，當然就是自然語言處理（Natural Language Processing，簡稱NLP）。自然語言處理主要工作包括了語言理解、語言生成、機器翻譯、語音識別等。目前見的應用非常多，包括了自動化客服、垃圾郵件檢測、社交媒體情感分析、醫療記錄分析、金融預測和新聞摘要等。總結來說，自然語言處理是一個動態且充滿潛力的領域，它正在不斷改變我們與計算機和數字訊息互動的方式。隨著技術的不斷發展，我們可以期待在更多領域看到 NLP 的創新應用，同時也需要持續關注與其發展相關的倫理和社會問題。本書最重要目的就是將你帶入這個行業，如果你是程式設計師，網頁設計師，又或者是App的開發者，如果不想被人工智慧搶掉工作，加入是最好的選擇。

從建構交易策略到使用Python的機器人投資顧問 機器學習和資料科學將在未來幾年顯著改變金融業。透過本實用指南，避險基金、投資和零售銀行以及金融科技公司的專業人士將學到如何建構對該行業極為關重要的ML演算法。您將研究ML概念和20多個案例研究，包括了監督式、非監督式和強化學習，以及自然語言處理(natural language processing, NLP)。 分析師、交易員、研究人員和開發人員還將深入研究投資組合管理、演算法交易、衍生性商品定價、詐欺偵測、資產價格預測、情緒分析和聊天機器人開發。您將探索現實生活中的問題，並學習以程式碼和範例作為後盾的科學上合理的解決方案。 本書包括： ‧基於迴歸的監督式學習交易策略和衍生性商品定價模型 ‧基於分類的監督式學習信用違約風險預測與詐欺偵測模型 ‧投資組合管理與收益率曲線建構中的降維技術及實例研究 ‧利用演算法和分群技術尋找交易策略和投資組合管理中相似物件的案例研究 ‧建立交易策略的強化學習模型和技巧，衍生性商品避險和投資組合管理 ‧使用Python函式庫(例如NLTK和Scikit-learn)的NLP技術

你想在工作時也能用華語和同事聊天、了解臺灣嗎？本書非常適合CEFR A2-B1程度的華語學習者，跟著是同事也是朋友的小清和小華，在以臺灣的辦公室為背景的輕鬆對話中，認識臺灣人的生活和文化。全書分為「人際篇」、「節假篇」、「自然篇」、「時事篇」、「人文篇」等5大類，10課內容貼近生活、語言自然實用，每課都有主題介紹、正體與簡體對話、英文翻譯、生詞與例句、短文與討論、語言點、角色扮演與延伸話題；可以進行聽、讀、跟著說等多樣的練習。並配有音檔，藉著聽小清和小華生動活潑的對話，以及清楚自然的短文內容，來學習華語語音、語調和說話方式。不管是上課還是自學，本書都能幫助你勇敢開口、說得更自然，同時發現臺灣生活多麼有趣！Want to chat with coworkers in Mandarin and learn more about Taiwan? Designed for learners at CEFR levels A2 to B1, this book follows Xiaoqing and Xiaohua, coworkers and friends, through lively conversations set in an office in Taiwan.Its 10 practical lessons cover five themes: relationships, holidays, nature, current affairs, and culture. Each lesson includes a topic introduction, dialogues in Traditional and Simplified Chinese, English translations, vocabulary and examples, short readings and discussions, language points, role plays, and further topics.Companion audio brings Xiaoqing and Xiaohua’s conversations to life and presents the readings through clear, natural narration. Learn

2023年以來， OpenAI相繼釋出了聊天機器人模型ChatGPT、 新一代多模態大模型GPT-4等產品， 以強大的能力俘獲了大量使用者， 顛覆了使用者對於AI的認知。 ▶什麼是ChatGPT？ ChatGPT是一個由OpenAI開發的聊天機器人模型，其透過NLP（Natural Language Processing，自然語言處理）技術實現與使用者智慧對話，開啟了全新AI（Artificial Intelligence，人工智慧）時代。ChatGPT的智慧程度引起了業界的廣泛關注，引發了使用者的熱議，使使用者對AI的未來有了更多的期待。 ▶技術底座：多技術融合助推ChatGPT發展走到11公尺的盡頭，蔡京的題ChatGPT並不是孤立存在的，其成功離不開眾多技術的支持。其背後的技術主要有生成式AI技術、自然語言處理技術、預訓練大模型技術和多模態技術。 ▶內容變革：ChatGPT開啟內容生產力革命 ChatGPT可以輔助使用者輸出多種內容，使內容生產變得更加簡單、高效。可以說，ChatGPT拓展了數位時代的創造力極限，開啟了內容生產力革命。 ▶ 商業展望：ChatGPT商業化之路雛形已現 AIGC技術在發展中完成了深厚的技術累積，這使得ChatGPT在B端與C端實現商業化的條件已經成熟。未來，以ChatGPT為代表的AIGC應用將會更好地服務B端與C端，提升其運作效率。 本書共12章，前5章從5個方面對ChatGPT進行了解讀，幫助使用者全面了解ChatGPT，對其形成完整的認知。第6～12章從傳媒、教育、娛樂、電商、金融、製造和醫療7個方面講解了ChatGPT的應用，展現了ChatGPT的商業價值。 本書特色：本書以ChatGPT為中心，對ChatGPT的相關知識進行詳細的講解。在講述ChatGPT理論知識的同時，還結合許多相關案例，內容詳實，引人深思。本書面向的讀者對象為對ChatGPT感興趣的人士、AI研究者、AIGC領域從業者、科技企業管理者等，能夠為讀者提供全新見解。

探索生成式人工智慧的無限可能！ 「如果你是開發者，想要掌握過去十年來最大規模的AI革命背後的工具及概念，本書是必備的指南。」 ―Lewis Tunstall，Hugging Face機器學習工程師及《Hugging Face and coauthor of Natural Language Processing with Transformers》一書共同作者 「本書包含學習生成式AI的一切資源，包括全面的解說、深思熟慮的技巧，與DIY練習，可謂應有盡有。」 ―Luba Elliott，AI藝術策展人，elluba.com 深入的理論解析與實用的程式碼範例，帶您掌握生成文本、圖像和音訊的最新技術。無論您是數據科學家還是軟體工程師，本書都將助您輕鬆上手，創造出令人驚豔的AI生成作品。立即開啟您的生成式AI之旅，讓創意與技術完美融合！ 本書將教導資料科學家和軟體工程師，如何使用生成式媒體技術和人工智慧來創造新穎的圖像或音樂。書中介紹了理論概念，並提供豐富的程式碼範例和插圖，讓讀者能夠在Google Colaboratory、Kaggle或Hugging Face Spaces等服務上執行這些範例，並學習使用開源庫。 本書還探討了從頭開始訓練和使用大型預訓練模型之間的權衡，如何建立能夠修改圖像風格的模型，以及調整變形模型以達到創意目的。內容涵蓋了文本、圖像和音頻等多種數據類型的生成模型，並詳細講解了Transformer和擴散模型等先進技術的構建和訓練方法。最後介紹了如何訓練一個能夠根據個人風格撰寫文字的模型，以及如何部署模型作為互動展示或服務。 -------------------------------------------------- 透過這本實作指南，學習運用生成式AI技術來建立奇妙的文本、圖像、音訊，甚至音樂。你將瞭解最先進的生成模型如何運作、如何微調與調整它們來滿足需求，以及如何結合現成的基礎模組來建立新模型，並在不同領域中開發創新的應用程式。 這本首選指南透過豐富的範例程式與容易瞭解的插圖來介紹理論概念，並帶你實際應用它們。 你將學習如何透過開源的程式庫來應用transformers和擴散模型，並探索程式、研究幾個既有的專案，藉以完成你的專案。 • 建立並自訂文本與圖像生成模型 • 瞭解「使用預訓的模型」與「微調自有的模型」之間的取捨 • 做出能夠以任

這是華人史上第一本與AI圖像共創的圖文輯在歷年臺北數位藝術節前瞻性地策展過第二自然、超機體、再轉存等里程碑大展後，如今人類世界真正迎接到AI時代的來臨。AI超乎預期的能力，甚至逼近了人類引以為豪的藝文與創作表現。本書的起心動念，是人類不該屈服於AI，而是正向思維地與AI進行共創。這本書裡的所有作品，都是運用作者的詩句為輸入元素，然後讓AI依此生成畫作，這是作者和AI的對話成果。作者宛若是個賽博格，AI為其增能，在Metaverse中以作者的分身來作畫，並以此詮釋其詩句。作者從AI繪畫熱潮一開始就加入實驗，先後試過Disco Diffusion, Midjournal, Stable Difussuion, DALL E, Mega.Space. 它們各有不同特性與優缺點，但其中最大的共同點，就是它們俱皆以驚人的速度在進化。很多人都只是嘗試採用提示詞去「命令」AI畫畫，以相當工具理性的態度去「利用」AI. 但作者關心的是新媒材本身的當代性，是否能反映個人的當下狀態，所以他摸索了一整年，試著與AI共處。作者年輕時的博論是做NLP (自然語言處理, Natural Language Processing) 的，啃了大量語言學的著述，醉心於Noam Chomsky的Universal Grammar. 而就在這幾年裡，深度學習Transformer Model的不斷演進，讓AI對人類文字語意的理解，有了驚人的進展，諸如OpenAI ChatGPT等等. 所以作者開始以詩與AI對話，將其詩句輸入AI去生成畫作, 而一年來它「懂」作者的詩的程度，愈來愈令人驚豔。再加上原本作者的詩作就習於空間與時間的交織，充滿各種畫面感，所以他很開心找到了與AI共創的方式，作者寫詩，調整參數，讓AI理解並畫出其詩中的景緻。而這樣的「共創」，正是本書企圖紀念的一個刻度。我們可以叫AI模仿甚至組合各種繪畫風格，但AI沒辦法創造風格。而我們每個人類卻都可以創造風格，即便畫得很醜，那也是你的風格。AI只能模仿和追隨你。繪畫風格這回事，是和人的身體息息相關的。你對自身肌理的控制與不可控制性，你生理上無形的各種慣性，形成了你的風格。那不只是心理的，更是生理的。對於缺乏身體性的AI而言，他沒辦法懂。無論是 Rule-based 或 Data-driven 的年代，AI 都無法無中生有。它必須靠模仿和訓練，才能

This book highlights cutting-edge research relevant to the building of a computational model of reading comprehension, as in the processing and understanding of a natural language text or story. A di

本書重點介紹了神經網絡模型在自然語言處理中的應用。首先介紹有監督的機器學習和前饋神經網絡的基本知識，如何將機器學習方法應用在自然語言處理中，以及詞向量表示（而不是符號表示）的應用。然後介紹更多專門的神經網絡結構，包括一維卷積神經網絡、循環神經網絡、條件生成模型和基於注意力的模型。後，討論樹形網絡、結構化預測以及多任務學習的前景。

Tackle a variety of tasks in natural language processing by learning how to use the R language and tidy data principles. This practical guide provides examples and resources to help you get up to spee

The book will appeal to scholars and advanced students of morphology, syntax, computational linguistics and natural language processing (NLP). It provides a critical and practical guide to computation

The book will appeal to scholars and advanced students of morphology, syntax, computational linguistics and natural language processing (NLP). It provides a critical and practical guide to computation

In Deep Learning with Python, Second Edition, updated from the original bestseller with over 50% new content, you'll explore challenging concepts and practice applications in computer vision, natural-language processing, and generative models. The bestseller revised Deep Learning with Python, Second Edition is a comprehensive introduction to the field of deep learning using Python and the powerful Keras library, written by the creator of Keras himself. This revised edition has been updated with new chapters, new tools, and cutting-edge techniques drawn from the latest research. In Deep Learning with Python, Second Edition, updated from the original bestseller with over 50% new content, you'll explore challenging concepts and practice applications in computer vision, natural-language processing, and generative models, building your understanding through practical examples and intuitive explanations that make the complexities of deep learning easily accessible. Purchase of the print book

Teaching computers to solve language problems is one of the major challengesof natural language processing. There is a large amount of interesting researchdevoted to this field. This book fills an exi

In the past few decades the use of increasingly large text corpora has grown rapidly in language and linguistics research. This was enabled by remarkable strides in natural language processing (NLP) t

Work on relationships takes place in many communities, including data modeling, knowledge representation, natural language processing, linguistics, and information retrieval. Unfortunately, continued

Statistical models recently developed in several research communities (natural language processing, information retrieval, machine learning) for textual information access pertain to several applicati

Mathematical Linguistics introduces the mathematical foundations of linguistics to computer scientists, engineers, and mathematicians interested in natural language processing. The book presents lingu

Mathematical Linguistics introduces the mathematical foundations of linguistics to computer scientists, engineers, and mathematicians interested in natural language processing. The book presents lingu

The community responsible for developing lexicons for Natural Language Processing (NLP) and Machine Readable Dictionaries (MRDs) started their ISO standardization activities in 2003. These activities

This book presents a broad range of deep-learning applications related to vision, natural language processing, gene expression, arbitrary object recognition, driverless cars, semantic image segmentati

Contributors from natural language processing, machine learning, knowledge representation and engineering, and user interface design explore theories and practices by which people can learn simply by

Turning text into valuable information is essential for businesses looking to gain a competitive advantage. With recent improvements in natural language processing (NLP), users now have many options f

Text analytics is a field that lies on the interface of information retrieval,machine learning, and natural language processing, and this textbook carefully covers a coherently organized framework dra

Build smart applications using cutting-edge technologies such as rules engines, code automation frameworks, and natural language processing (NLP). This book provides step-by-step instructions on how t

TensorFlow is currently the leading open-source software for deep learning, used by a rapidly growing number of practitioners working on computer vision, Natural Language Processing (NLP), speech reco

This open access book describes the results of natural language processing and machine learning methods applied to clinical text from electronic patient records. It is divided into twelve chapters. Ch

Selected from presentations at the March 2011 conference Meaning, Context, and Cognition, in Lodz, Poland, 13 papers explore cognitive aspects of processing natural language data in the interface of s

Mostly Czech scientists in a wide range of natural and social sciences explore processing methods and their applications that are practical for decision making and task management at the regional leve

This book presents state-of-the-art applications of digital watermarking in audio, speech, image, video, 3D graph, text, software, XML, database and natural language processing. It also presents new a

Getting to grips with artificial intelligence (AI) and the way it's changing the world of work is essential for HR professionals. From using natural language processing to ensure job adverts are free

Yorick Wilks is a central figure in the fields of Natural Language Processing and Artificial Intelligence. This set consists of a volume of selected papers and a volume with contributions from his pee

Sentiment analysis is the computational study of people's opinions, sentiments, emotions, moods, and attitudes. This fascinating problem offers numerous research challenges, but promises insight useful to anyone interested in opinion analysis and social media analysis. This comprehensive introduction to the topic takes a natural-language-processing point of view to help readers understand the underlying structure of the problem and the language constructs commonly used to express opinions, sentiments, and emotions. The book covers core areas of sentiment analysis and also includes related topics such as debate analysis, intention mining, and fake-opinion detection. It will be a valuable resource for researchers and practitioners in natural language processing, computer science, management sciences, and the social sciences. In addition to traditional computational methods, this second edition includes recent deep learning methods to analyze and summarize sentiments and opinions, and als

With its intuitive yet rigorous approach to machine learning, this text provides students with the fundamental knowledge and practical tools needed to conduct research and build data-driven products. The authors prioritize geometric intuition and algorithmic thinking, and include detail on all the essential mathematical prerequisites, to offer a fresh and accessible way to learn. Practical applications are emphasized, with examples from disciplines including computer vision, natural language processing, economics, neuroscience, recommender systems, physics, and biology. Over 300 color illustrations are included and have been meticulously designed to enable an intuitive grasp of technical concepts, and over 100 in-depth coding exercises (in Python) provide a real understanding of crucial machine learning algorithms. A suite of online resources including sample code, data sets, interactive lecture slides, and a solutions manual are provided online, making this an ideal text both for grad

This book is an advanced introduction to semantics that presents this crucial component of human language through the lens of the 'Meaning-Text' theory - an approach that treats linguistic knowledge as a huge inventory of correspondences between thought and speech. Formally, semantics is viewed as an organized set of rules that connect a representation of meaning (Semantic Representation) to a representation of the sentence (Deep-Syntactic Representation). The approach is particularly interesting for computer assisted language learning, natural language processing and computational lexicography, as our linguistic rules easily lend themselves to formalization and computer applications. The model combines abstract theoretical constructions with numerous linguistic descriptions, as well as multiple practice exercises that provide a solid hands-on approach to learning how to describe natural language semantics.

This book is an advanced introduction to semantics that presents this crucial component of human language through the lens of the 'Meaning-Text' theory - an approach that treats linguistic knowledge as a huge inventory of correspondences between thought and speech. Formally, semantics is viewed as an organized set of rules that connect a representation of meaning (Semantic Representation) to a representation of the sentence (Deep-Syntactic Representation). The approach is particularly interesting for computer assisted language learning, natural language processing and computational lexicography, as our linguistic rules easily lend themselves to formalization and computer applications. The model combines abstract theoretical constructions with numerous linguistic descriptions, as well as multiple practice exercises that provide a solid hands-on approach to learning how to describe natural language semantics.

New American Streamline combines natural language, everyday situations, and extensive practice of all four skills to give students a practical command of simple, spoken English. Each of the three lev