|
内容紹介・もくじなど
著者プロフィール
パイ,スハス(パイ,スハス)
10年以上にわたりテック業界で活躍してきた経験豊富な機械学習研究者。2020年からは、Y Combinatorの支援を受けたAI&フィンテック系スタートアップHudson Labsの共同創業者、CTO、機械学習研究責任者を務めている。Hudson Labsでは、ドメイン適応型LLM、テキストランキング、表現学習において複数の革新的な技術を開発し、同社製品の中核機能を支える。オープンソースLLMの開発にも貢献しており、BLOOM LLMプロジェクトの一環としてBigScienceのプライバシーワーキンググループで共同リードを務めた。機械学習コミュニティにも積極的に関…() パイ,スハス(パイ,スハス)
10年以上にわたりテック業界で活躍してきた経験豊富な機械学習研究者。2020年からは、Y Combinatorの支援を受けたAI&フィンテック系スタートアップHudson Labsの共同創業者、CTO、機械学習研究責任者を務めている。Hudson Labsでは、ドメイン適応型LLM、テキストランキング、表現学習において複数の革新的な技術を開発し、同社製品の中核機能を支える。オープンソースLLMの開発にも貢献しており、BLOOM LLMプロジェクトの一環としてBigScienceのプライバシーワーキンググループで共同リードを務めた。機械学習コミュニティにも積極的に関与しており、2021年以降、トロント機械学習サミット(Toronto Machine Learning Summit:TMLS)の議長を務め、世界各地のAIカンファレンスで講演を行っている。また、NLP分野の最新研究を扱うセミナーも定期的に主催 |
||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
大規模言語モデル(LLM)を活用した実践的なアプリケーション開発へと繋がる、知識、テクニック、ツールの包括的…(続く)
大規模言語モデル(LLM)を活用した実践的なアプリケーション開発へと繋がる、知識、テクニック、ツールの包括的な解説書。著者自身によるLLMを用いた数々の実験と、800本を超える論文の知見に基づき、モデルの構造や限界、活用手法、応用パターンを体系的に紹介することで、直感的な理解と応用力を身につけられるように構成されています。LLMがどんなデータを用いて、どんな目的で訓練されているかといった原理的な側面から、ファインチューニング、推論の最適化、RAG(検索拡張生成)といった応用的な側面まで、PoC(概念実証)から一歩踏み出したアプリケーションの構築を目指す方に気づきを与える一冊です。
もくじ情報:第1部 LLMの構成要素(イントロダクション;事前学習(Pre‐Training)データ;語彙とトークン化;アーキテクチャと学習目的);第2部 LLMの活用(LLMをユースケースに合わせる;ファインチューニング;高度なファインチューニング手法;アライメントと論理的推論;推論の最適化);第3部 LLMアプリケーションのパラダイム(LLMから外部ツールを利用する;表現学習と埋め込み;RAG;デザインパターンとシステムアーキテクチャ)