Claudeのプロンプト改善
https://scrapbox.io/files/6736dd1c91c61f4b7d202127.png
Anthropic Consoleで可能になった、プロンプト改善機能
既存のプロンプトを、Anthropicのdeveloper consoleへ投げるだけで、自動的に改良してくれる。
https://scrapbox.io/files/6736df36655ba1691fc40baa.png
プロンプトを強化させる方法
次の 4 つのステップでプロンプトを強化する。
例の識別:
プロンプトテンプレートから例を見つけて抽出する
初期ドラフト:
明確なセクションとXMLタグを備えた構造化されたテンプレートを作成する
思考の連鎖の洗練:
詳細な推論指示を追加し洗練する
例の強化:
新しい推論プロセスを示す例を更新する
プロンプト改善による結果
マルチラベル分類テストの精度が 30% 向上
500件のWikipediaの記事とタイトルを与えられたClaude3 Haikuが記事のタイトルを記事からランダムに抽出した文章と一致させる能力をテスト。 Claude 3 Haikuの精度は、元のプロンプトと比較して30%向上した。
要約タスクの単語数遵守が 100% まで向上
10個のWikipedia記事を与えられたClaudeは、プロンプト改善ツールを実行した後、特定の単語数の範囲内で要約を書くという指示を100%遵守した。
プロンプト改善剤を使用するタイミング
詳細な推論を必要とする複雑なタスク
スピードよりも正確さが重要な状況
クロードの現在の成果に大幅な改善が必要な問題