MetaのAIエージェント「Muse」を自作ガジェットに！SDKで広がる可能性
MetaのAIエージェント「Muse」が自作ガジェットと連携可能に！
Metaが、同社のパーソナルAIエージェント「Muse」と連携するデバイスを自作するためのサイドプロジェクト「Muse Gadgets」を発表しました。市販の「ESP32」搭載ボードや「Raspberry Pi」にSDKを組み込むことで、手持ちのディスプレイやボタン、センサー、アクチュエーターなどをMuseに接続できるようになります。
デバイス向けSDKとファームウェアは、Apache License 2.0の下、GitHubでオープンソースとして公開されており、開発者やDIY愛好家にとっては非常に魅力的なニュースと言えるでしょう。
Muse Gadgetsで何ができるのか？
Museは、Metaが9月に米国で提供を開始したAIエージェントで、チャット形式で指示を受け、メールの送信や旅行の予約、フォームへの入力などのタスクを代行します。
このMuseと自作ガジェットを連携させることで、以下のような可能性が広がります。
- ESP32 Device SDK: ESP32ボードに画面を追加して画像をMuseに表示させたり、音声の入出力やセンサーを組み込んだりできます。例えば、Museに話しかけて情報を表示するスマートディスプレイや、環境センサーのデータをMuseに連携させるデバイスなどが考えられます。
- Linux Device SDK: Raspberry PiやLinuxマシンをMuseのガジェットとして利用できます。独自のコマンドを追加することで、Museにシステム管理の作業を任せたり、ホームオートメーションソフト「Home Assistant」の操作を代行させたりすることも可能になります。例えば、Museに話しかけるだけで家の照明をつけたり、スマート家電を操作したりといった連携が実現できます。
Metaは、このプロジェクトを「ハッカーがハッカーのために、ただ楽しむために作ったもの」と説明しており、開発者の自由な発想を歓迎しています。
どう使えるのか？具体的なプロジェクト例
Muse GadgetsのWebサイトでは、対応する市販デバイスを使ったプロジェクト例が紹介されています。
- Waveshareの「ESP32-S3-Touch-AMOLED-1.75C」: 1.75インチの円形AMOLEDタッチディスプレイとスピーカー、マイク、バッテリーを搭載しており、プッシュトゥトークでMuseに話しかけることができるデバイスとして利用できます。手のひらサイズのスマートアシスタントのようなものが作成できそうです。
- Raspberry Pi 5: Home Assistantなどとの連携に使うことで、Museを介してホームオートメーションシステムを制御するハブとして機能させることが可能です。声で家電を操作するだけでなく、より複雑なタスクをMuseに代行させることができます。
- スティック型デバイス（近日公開）: テレビのHDMI端子に挿し、Museに大画面へコンテンツを表示させるデバイスも予定されています。これにより、リビングのテレビがMuseのディスプレイとして機能し、より大きな画面でMuseからの情報を受け取れるようになります。
また、Meta自身もデバイス「Muse Home Link」を用意しています。これは、自宅のWi-Fiに接続し、ユーザーが既に持っている対応機器や、ローカルのHTTP APIを備えた自作機器にMuseがアクセスできるようにするものです。コミュニティが作成した「スキル」を使えば、環境によっては照明の点灯やテレビの操作、プリンタへの文書送信などをMuseに任せられるとのこと。米国のMuseサブスクリプション契約者を対象に、1人1台まで無料で提供され、Webサイトで申し込みを受け付けています。
試すならどこから始めるか？
Muse Gadgetsに興味を持った開発者やWeb制作者の方は、以下の情報からプロジェクトを始めてみましょう。
- Muse GadgetsプロジェクトのWebサイト: プロジェクトの概要やSDK、ファームウェアへのリンク、プロジェクト例などが詳しく紹介されています。まずはここから全体像を把握するのが良いでしょう。
- GitHubのリポジトリ: デバイス向けSDKとファームウェアがオープンソースで公開されています。コードを実際に見て、どのような実装になっているかを確認し、自分のプロジェクトに組み込む準備を始められます。
- Discordコミュニティ: 開発者同士が交流できるDiscordコミュニティも用意されています。自作したガジェットを「#projects」チャンネルで共有すると、Webサイトで紹介される場合もあるとのこと。他の開発者との情報交換や質問、アイデアの共有に活用できます。
ただし、MetaはMuse Gadgetsについて「いじった結果、ボードが動かなくなったり、保証が無効になったり、電圧低下が起きたり、破産したりといった“副作用”があり得る」として、自己責任での利用を呼びかけています。しかし、この注意書きこそが、開発者の探究心をくすぐるメッセージとも言えるでしょう。ぜひ、この機会にMuseと自作ガジェットの可能性を探ってみてはいかがでしょうか。
