Observer AI

画面やカメラを監視したり、音声を聞き取ったりして、何らかのイベントが発生した際に自動的にアクションを実行するAIエージェントを作成できます。

Observer AIを使えば、ローカルLLM（ローカルローカルリソースマネージャー）を搭載したインテリジェントなマイクロエージェントを構築できます。作成したエージェントは、デジタル環境を監視し、Discord、Telegram、WhatsApp、SMS、メール、電話、Pushoverなどを通じて自動的に通知を送信します。


仕組み

1. センサーを選択：画面キャプチャ、カメラ、マイク、クリップボード、またはオーディオ
2. モデルを選択：Ollama、llama.cpp、vLLMを介してローカルモデルに接続するか、クラウド推論を使用
3. アクションを設定：条件が満たされたときに通知、メモリログ、またはビデオ録画を設定

使用例

- カメラに誰かが映ったときにTelegramでアラートを送信する人物検出
- 特定のコンテンツが表示されたときに通知するスマートスクリーンモニタリング
- 会議の文字起こしとログ記録
- 視覚的または音声的な合図によってトリガーされるカスタム自動化

通知チャネル

- Discord
- Telegram
- WhatsApp
- SMS
- メール
- 電話（VoIP）
- Pushover
- ブラウザ通知

プライバシー優先設計

Observer AIは100%オープンソースです。独自の推論サーバーとDiscordウェブフックを使用して完全にローカルで実行でき、データは当社のサーバーに一切アクセスしません。最大限のプライバシーを確​​保するには、ソースコードからコンパイルしてローカルモデルを使用してください。

機能

- 視覚および音声センサー入力
- ローカルLLMサポート（Ollama、llama.cpp、vLLM、LMStudio）
- 利便性を高めるクラウド推論オプション
- コンテキスト保持のためのエージェントメモリシステム
- ビデオクリップの録画とマーキング
- コミュニティエージェントの共有
- バックグラウンド動作

オープンソース

ソースコード全文は https://github.com/Roy3838/Observer で公開されています。

アプリ利用規約（EULA）：https://www.apple.com/legal/internet-services/itunes/dev/stdeula/
プラットフォーム利用規約：https://observer-ai.com/#/terms
プライバシーポリシー：https://observer-ai.com/#/privacy