脚本プランナー▸ 
AIアプリ 
AIニュース Glass：画面と音声をリアルタイムでキャプチャする不可視のAIデスクトップアシスタント
小编 ·
Glass：画面と音声をリアルタイムでキャプチャする不可視のAIデスクトップアシスタント
Glassは、Pickleチームが開発したオープンソースのデスクトップAIアシスタントで、macOS専用に設計されており、ユーザーの「デジタル脳の拡張」になることを目指しています。バックグラウンドで動作し、画面と音声コンテンツをリアルタイムでキャプチャし、ユーザーの操作コンテキストを理解して、これらの情報を構造化されたナレッジに変換し、即座にフィードバックを提供します。Glassは個人の効率化ツールや会議記録アシスタントとして機能し、自動的に議事録を生成してアクションアイテムを抽出するほか、会話中にサポートを提供してチームのコミュニケーション効率を向上させます。
コア機能
リアルタイム会議記録：会議の音声をリアルタイムで監視し、詳細な記録と要約を生成して構造化されたノートに整理し、検索と共有を容易にします。複雑な専門用語や問題に遭遇した際には、迅速に背景知識やソリューションを提供し、会議の効率を向上させます。
学習支援：ユーザーが閲覧しているドキュメントやWebページを分析し、重要な情報を抽出して学習ノートを生成することで、ユーザーがコンテンツをより深く理解し、習得するのを支援し、学習効率を高めます。
プログラミングサポート：コードインターフェースを観察し、リアルタイムのデバッグ提案とコード最適化のソリューションを提供することで、開発者が迅速に問題を解決し、プログラミング効率とコード品質を向上させるのを支援します。
即時情報処理：画面と音声情報をリアルタイムでキャプチャし、コンテキストを理解して日常的なやり取りを構造化されたナレッジに変換し、ユーザーがいつでも関連情報にアクセスできるようにします。
ショートカット操作：キーボードショートカットを通じてメインインターフェースをすばやく呼び出したり、Q&Aを起動したり、位置を移動したりでき、マウス操作が不要で、気が散ることを減らし、ユーザーがより集中できるようにします。
活用シーン
Glassは会議のシナリオだけでなく、学習補助やプログラミングサポートにも活用できます。ユーザーが閲覧しているドキュメントやWebページを分析し、重要な情報を整理して学習ノートを生成できます。また、プログラミング時にはリアルタイムのデバッグ提案とコード最適化のソリューションを提供できます。
動作の特徴
Glassはローカルで動作し、「不可視デザイン」を採用しており、デフォルトではキャプチャや記録を行わず、スクリーンショット、スクリーン録画、Dockにも表示されません。ユーザーのプライバシーを保護しながら、控えめで効率的な動作を実現しています。
利用手順
ダウンロードとインストール：GlassのGitHubページにアクセスし、macOS用のインストールパッケージをダウンロードしてインストールします。
プログラムの起動：インストールが完了したら、ワンクリックで起動すると、Glassはバックグラウンドで動作します。
ショートカット設定：ショートカットを熟知して設定することで、すばやく操作し、マウスなしでの操作を実現します。
モデルの連携（オプション）：OpenAI、Anthropic Claudeなどの主要な大規模モデルを連携でき、API Keyを自由に切り替えたり、デフォルトサービスを利用したりできます。
試用開始：会議、学習、プログラミングなどのシナリオでGlassを使用すると、リアルタイムで情報を取得してサポートを提供します。
Glassは複数モデルの連携をサポートしており、ユーザーはAPI Keyを自由に切り替えたり、公式のデフォルトサービスを使用したりできます。現在、GlassはmacOSのみをサポートしていますが、WindowsおよびLinuxバージョンは開発中です。このプロジェクトはGitHub上で1,800以上のスターと300以上のフォークを獲得しています。
公式サイト：https://pickle.com/glass
GitHub：https://github.com/pickle-com/glass
