Hacker News · AI· soltanov·· 1 日前厳選AI スコア78
agent-desktopが登場:AIエージェント向けクロスプラットフォーム対応デスクトップアクセシビリティツリー操作CLI
Vercel: Computer use CLI for AI agents
AI ガイド
agent-desktopがリリースされた。AIエージェント向けに、アクセシビリティツリーを介してデスクトップアプリのUIを読み取りJSON形式で返すコマンドラインツールおよびCライブラリを提供する。同ツール自体にはモデルが内蔵されておらず、操作可能な要素にrefを割り当てることで外部スクリプトによる「観察・操作・検証」のループを完結させる仕組みとなっており、純粋なピクセルマッチングは行わずネイティブデスクトップアプリのみをサポートする。macOS、Windows、Linuxのクロスプラットフォームに対応し、共通で60種類の基本操作コマンドを提供する。
推薦理由
純粋な視覚ピクセルマッチングではなくOSのアクセシビリティツリーをベースとすることで、開発者がクロスプラットフォーム対応のデスクトップ操作エージェントを構築するための軽量なインターフェースソリューションを提供する。
出典:Hacker News · AI · agent-browser.dev