並列タイムライン: 大規模言語モデルの台頭 - AWS 規範ガイダンス

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

並列タイムライン: 大規模言語モデルの台頭

エージェントフレームワークが進化するにつれて、自然言語処理と機械学習で並行して収束的な改革が行われました。

  • 2017 – トランスフォーマー: ホワイトペーパー「Attention Is All You Need」 (Vaswani et al. 2017) では、トランスフォーマーアーキテクチャが導入されました。これにより、機械による言語の処理方法と生成方法が劇的に改善されました。

  • 2022 – ChatGPT: OpenAI は ChatGPT と呼ばれる GPT-3.5 へのチャットベースのインターフェイスをリリースしました。これにより、汎用 AI システムとの自然なインタラクティブな会話が可能になりました。

  • 2023 年 – オープンソース LLMs: Llama、Falcon、Mistral のリリースにより、強力なモデルが広くアクセス可能になり、オープンソース環境とエンタープライズ環境でのエージェントフレームワークの開発が加速しました。

これらのイノベーションにより、言語モデルはコンテキストの解析、アクションの計画、レスポンスの連鎖が可能な推論エンジンに変わり、LLMs はインテリジェントなソフトウェアエージェントの主要なイネーブラーになりました。