UI-TARS-desktop:画面を見ながら、コンピュータの代わりに操作する
翻訳済み画面を見ながら確認する必要がある作業を任せたい場合、マウスやキーボードの操作を代行してくれるデスクトップAIエージェントです。
3行要約
1) 画面を見て、マウスやキーボードの操作を代行するデスクトップAIエージェントです。 2) リリースページからv0.2.4のインストールファイルをダウンロードし、AIモデルのURLを連携させます。 3) 画面を見ながら確認する作業を任せる際に使用します。READMEの例では、GitHubの最新のイシューを確認しています。
画像出典:bytedance/UI-TARS-desktop リポジトリの README
一目でわかる
• スター数 39,540個(2026年11月4日現在) • 使用言語:TypeScript 89.4%(Webやアプリ開発用の言語)、MDX 8.3%(ドキュメント用マークダウン拡張) • ライセンス:Apache-2.0(ソースを公開し、自由に使用することを許可するオープンソースライセンス) • 韓国語:アプリの画面には韓国語がなく、設定の「Language」では英語と中国語から選択します(AIの出力言語) • 最終更新日:2026-10-09 https://github.com/bytedance/UI-TARS-desktop
使い方
1) 以下のリリースページから、Windows 版は Setup.exe、Mac 版は dmg をダウンロードしてインストールしてください。最新の v0.3.1 にはインストールファイルがありません。 https://github.com/bytedance/UI-TARS-desktop/releases/tag/v0.2.4 2) Macの場合は、設定で「アクセシビリティ」と「画面録画」の権限を有効にし、モニターは1台のみ使用してください。 3) 「Settings」にAIモデルのサーバーアドレスとキーを入力してください。モデルはHugging Faceなどに直接デプロイする必要があり、費用はサービスによって異なります。
人気のコメント
GitHub イシュー #310 · 反応 3件 · Eric-K-Jin · 2025年3月 「この方法を試してみてください。実際にテストしてみたところ、DeepSeek を使用することができました。(イシュー #283)」(翻訳) https://github.com/bytedance/UI-TARS-desktop/issues/310#issuecomment-2746998860
知っておくべき点
コンピュータ全体を操作するため、決済やログイン、個人情報の入力はご自身で行ってください。 画面の画像が設定されたモデルサーバーに送信されるため、個人情報が表示されているウィンドウは閉じておいてください。
AIの助けを借りてまとめた文章です。
このコンテンツを試した人たち
まだ試した人はいません
結果の写真を1枚載せるだけでも大丈夫です。 最初の一人になってみましょう。