内容紹介：生成AIを活用したアプリケーションは、リサーチ、ソフトウェア開発、各種創作活動の補助等、さまざまな知的労働において、欠かせないパートナーとなりつつあります。従来の演繹的なロジックの積み重ねにより構築されたソフトウェアと構造的に異なる生成AIアプリケーションは、その性質上、次の特徴を持ちます。・確率的出力：同じ入力に対して、常に同じ出力が得られるとは限らない・複雑な挙動：入力と出力の関係が明確ではなく、ブラックボックス的な側面がある・文脈依存性：過去のやり取りや外部情報によって出力が変化する　これらの特徴から、生成AIアプリケーションの品質を保証するためには、従来のソフトウェアテストとは異なる手法によるテストと評価が不可欠となります。本書では、生成AIを活用したアプリケーション、システムに焦点をあてて、そのテスト、評価のアプローチを紹介していきます。
生成ＡＩの出力を評価し、再現性・品質・安全性を確保する。正確な情報を提供できるか。出力結果にばらつきはないか。不適切な表現を制御できるか。存在しない事実を提示していないか。プライバシーの侵害につながらないか。実際に評価を行うサンプルコード付き。
もくじ情報：第１章　生成ＡＩアプリケーションの評価の概要；第２章　生成ＡＩアプリケーションの評価基盤モデルと評価アプローチ；第３章　基本的な評価メトリクス；第４章　評価メトリクスのツールによる評価の実際；第５章　生成ＡＩアプリケーションのセキュリティ評価；第６章　ＡＩエージェントの評価；第７章　生成ＡＩアプリケーションのテスト・評価のその他のトピック

松木　晋祐(マツキ　シンスケ)
株式会社ベリサーブ　執行役員　研究開発管掌。ＡＩＱＶＥ　ＯＮＥ株式会社　取締役ＣＴＯ。独立系ソフトウェアベンダにて、テストオペレータから品質部門統括まで、ソフトウェアテストと品質保証にまつわるさまざまなロールを経験後、株式会社ベリサーブ／ＡＩＱＶＥ　ＯＮＥ株式会社へ。ソフトウェア開発、ＱＡ／テストにまつわる先進技術推進、応用技術開発を担う部門を創設、運用。生成ＡＩが組み込まれたシステムの品質保証技術、ＡＩ駆動開発に向けたプロセスＱＡ技術の研究などを推進。また、ＡＩＱＶＥ　ＯＮＥ株式会社ではゲーム分野へのＡＩ４ＱＡ技術／製品開発などを企画、製品化を実現。ＡＩとＱＡの掛け合わせで国内のさまざまな企業産業に向けた技術開発、提案を行なっている。社外活動に、東京電機大学ＣｙＳｅｃ講師、テスト自動化研究会ファウンダー、ＩＳＯ／ＩＥＣ　ＪＴＣ１／ＳＣ７／ＷＧ２６、ＪＳＴＱＢ　Ｔｅｃｈｎｉｃａｌ　Ｃｏｍｍｉｔｔｅｅ、Ｗ３Ｃ　ＣＳＳＷＧコントリビューターなど（本データはこの書籍が刊行された当時に掲載されていたものです）