AI(人工知能)5分で読めます

Anthropic、Claude APIに会話途中で推論の強さを変えるベータ機能を追加

AI要約複数の情報源を統合して作成しています

Anthropicは11月12日、Claude APIにベータ機能を追加し、同じ会話の中でメッセージごとにeffort(推論の強さ)を調整できるようにした。キャッシュを維持したまま、応答の質とコストのバランスを柔軟に変えられる。

Anthropic、Claude APIに会話途中で推論の強さを変えるベータ機能を追加

Anthropicは11月12日、ClaudeのAPIにベータ機能を追加したと発表しました。同じ会話の中で、モデルが回答にどれだけ力を注ぐかを示す「effort」をメッセージごとに切り替えられるようになります。回答の充実度、応答速度、利用コストのバランスを、会話を途切れさせずに調整できるのが特徴です。

ポイント

  • Anthropicが11月12日にClaude APIへ追加したベータ機能
  • 会話の途中でeffort(推論の強さ)を変更できる
  • メッセージ列に空のsystemメッセージを挿入し、output_config.effortでレベルを指定する
  • トップレベルの設定とプロンプトキャッシュは維持される
  • 変更は次の新しいユーザーメッセージから有効になり、過去の内容には影響しない

設定の方法とキャッシュの扱い

これまで1つの会話には固定のパラメータしか適用できませんでした。新機能では、メッセージ列に空のsystemメッセージを1件挿入し、output_config.effortで目標のレベルを指定します。会話全体の設定や、すでに利用されているプロンプトキャッシュ(同じ入力の処理結果を再利用する仕組み)はそのまま維持されるということです。

ただし、この指示は過去にさかのぼって適用されません。次に新しい入力が来るユーザーメッセージから初めて有効になり、すでに生成済みの内容は変わりません。そのため、どこに挿入するかを見極める必要があります。

effortが変えるもの

effortが調整するのは、最終的な文章量だけではありません。思考の深さ、ツールを呼び出す回数、回答を組み立てるための処理量にも影響します。

典型的な使い方としては、会話の前半は軽いやり取りをし、複雑な分析に移る場面でレベルを上げる方法が挙げられます。長い処理の連なりを持つAIエージェントでは特に有効で、前半の検索は低いレベルでトークン(AIが文章を処理する単位)を節約し、推論が必要な場面でレベルを上げられます。会話全体のために前もってコストを払う必要がなくなります。

出典元記事を読む(AI(人工知能))
LINEX
NihonTechHub

NihonTechHub

技術系ジャーナリスト

日本の最新テクノロジーやスタートアップ情報を発信するプラットフォームです。国内外のイノベーションをつなぎ、未来を切り開くための知識とインスピレーションを提供します。

Tools

NihonTechHub ソフトウェア · 私たちが開発した便利なツールとソフトウェア

Google Drive ダウンローダー

閲覧専用ファイルの簡単ダウンロード

Google DriveのView-only(閲覧専用)ファイルを簡単にダウンロードできるツールです。PDF、Docxファイルに対応しています。

PDF 対応済みDocx 対応済み無料で利用可能

この機能はNihonTechHubアプリでもご利用いただけます(Android・iOS対応)

App

無料

外出先でも最新のテクノロジーニュースをチェック!リアルタイム通知とパーソナライズされたニュースフィードを受け取るにはアプリをダウンロードしてください。

  • ・リアルタイム更新
  • ・プッシュ通知
  • ・カスタマイズ可能