Claude新機能「自動タスク実行」：AIがパソコンを操作する完全ガイド

AnthropicはClaude 3.5 Sonnetモデルに、パソコンを直接操作できる自動タスク実行機能を追加する大型アップデートを実施しました。これによりClaudeは単なる対話アシスタントではなく、人間のように画面を“見て”操作できるようになり、自動化業務やプログラミングに新たな可能性をもたらします。

Claude自動タスク実行機能で何が変わるのか

この新機能の中核は、Anthropicが開発した専用APIにあります。Claudeがパソコンの画面を認識し、操作方法を理解できるようになりました。開発者は指示を入力するだけで、Claudeがそれを具体的な操作（ブラウザの起動、フォーム入力、スプレッドシートのチェックなど）に変換して実行します。

公式データによると、OSWorldベンチマークテストで、Claude 3.5 Sonnetはスクリーンショットの理解において14.9%のスコアを達成。人間の70%〜75%には及ばないものの、他のAIモデルを大きく上回ります。処理ステップを増やすと、スコアは22%まで向上します。

ClaudeのPC操作で業務効率を上げる方法

一般ユーザーにとって、Claudeのパソコン操作能力は煩わしい手動作業を大幅に削減します。例えば複数のデータソースから情報を整理する際、Claudeに要件を伝えるだけで、関連ソフトを自動的に開き、情報を検索し、入力まで完了します。

すでにReplit、Canva、DoorDashなどの企業がこの機能をテスト中です。Replitは専用のアプリケーションチェックツールを開発し、プログラミング中にコードの動作を自動評価する用途で活用しています。この自動タスク実行能力により、Claudeは反復性が高くステップ数の多いワークフローに最適です。

Claude新機能：強化されたコーディングとマルチステップタスク処理

パソコン操作機能に加え、今回のアップデートでClaudeのコーディング能力も大幅に向上しました。SWE-bench Verifiedテストでは、Claude 3.5 Sonnetのスコアが33.4%から49%に急上昇。OpenAI o1-previewを含むすべての公開モデルを上回っています。

TAU-benchの小売領域テストでは、Claudeのスコアが62.6%から69.2%に改善。GitLabやCognitionなどの企業からの初期フィードバックによると、新モデルは長時間にわたるタスクやマルチステップのソフトウェア開発プロセスで優れたパフォーマンスを発揮し、数時間にわたって安定して動作します。開発者や複雑なタスクを効率的に処理したいユーザーにとって、Claudeの今回のアップグレードは注目に値します。