Screen Operator

このアプリはAIを活用してさらに開発を進めることができます。詳細はこちら：https://github.com/Android-PowerUser/ScreenOperator

GitHubでナイトリービルドをご確認ください：https://github.com/Android-PowerUser/ScreenOperator

Screen Operatorにタスクを記述すると、画面をタップしてタスクを完了する動作をシミュレートします。すると、視覚言語モデルが、画面とスマートフォンを操作するためのコマンドを含むシステムメッセージを受け取ります。Screen Operatorはスクリーンショットを作成し、Geminiに送信します。Geminiはコマンドを返信し、Screen Operatorはアクセシビリティサービス権限を使用してこれらのコマンドを実行します。


対応機種は以下の通りです。
Gemini 2.0 Flash Lite、
Gemini 2.0 Flash、
Gemini 2.5 Flash lite、
Gemini 2.5 Flash、
Gemini 2.5 Flash live（GoogleがAPIを変更したため、現在は動作しません）、
Gemini 2.5 Pro（Googleが無料APIの利用条件を変更したため、現在は動作しません）、
Gemma 3n E4B it（クラウド）、
Gemma 3 27B it。

Googleアカウントで18歳未満として登録されている場合、Googleが（不当にも）APIキーの発行を拒否するため、成人アカウントが必要です。

https://github.com/Android-PowerUser/ScreenOperator