Amazon Web Services(AWS)は、生成AIの検索拡張生成(RAG)が抱える精度不足を解消する新手法「タスク対応型知識圧縮(TAKC)」を発表した。同社の技術ブログによれば、この手法は文書間の複雑な関連性を維持しつつトークン数を大幅に削減し、企業における大規模データ活用の課題解決に貢献するとしている。

なぜ従来のRAGでは複雑な文書横断推論が困難だったのか?

企業における生成AI導入の現場では、従来のRAGの限界が顕在化している。AWSの技術文書が指摘するように、RAGは単純な類似性検索に基づいているため、数百の文書にまたがる財務分析や法務コンプライアンスのような「文脈の統合」が求められるタスクでは、情報の断片化が避けられない。この情報の分断が推論精度の低下を招き、複雑な問いに対する信頼性の高い回答生成を阻害する要因となっていた。

トークン数を最大64倍削減する「マルチレート圧縮」の仕組みとは?

AWSが提唱するTAKCは、文書をあらかじめ特定のタスク向けに要約・圧縮するアプローチをとる。汎用的な要約とは異なり、財務分析用には収益やキャッシュフロー、コンプライアンス用には規制違反歴を重視するなど、目的別に情報を取捨選択する点が核心だ。このプロセスにより、トークン数を8倍から64倍に圧縮しつつ、タスクに必要な情報を高密度で保持できる。さらに、クエリの複雑さに応じて4段階の圧縮率を動的に切り替える「マルチレート圧縮」を採用しており、コスト最適化と回答精度のバランスを自動制御する合理的な設計となっている。

サーバーレス構成で実現するエンタープライズAIの実用性

TAKCの技術的な実装面では、AWS LambdaやAmazon ElastiCache、Amazon Bedrockといったサーバーレス構成が採用されており、高いスケーラビリティが確保されている。これにより、企業はインフラ運用負荷を抑えながら、大規模な文書群を扱う高度な推論パイプラインを構築可能だ。特に、情シスやインフラ運用担当者にとっては、既存基盤への統合や運用管理の簡素化が容易になる点が大きな恩恵となる。これは、エンタープライズAI導入のハードルを下げる重要な要素といえる。

圧縮プロセスにおける情報欠落と運用負荷をどう制御すべきか?

TAKCはRAGの限界を突破する可能性を秘める一方で、課題も残されている。圧縮の質は「タスク定義プロンプト」の精度に依存するため、設計次第では重要な情報が欠落するリスクがある。また、オフラインでの事前圧縮プロセスが、データ更新頻度の高い環境でどの程度の運用負荷となるのか、実運用での検証が不可欠だ。企業が自社の業務知識に合わせてこの圧縮パイプラインをいかに最適化・維持できるかが普及の鍵となる。知識の「検索」から「構造化された圧縮」への転換が、エンタープライズAIの新たな標準となるか注目される。