「家が気づく、家が寄り添う」——「エージェンティックホーム」がセマンティックカメラハッカソンでイエナカ賞【Enable AI Foundry】

Enable AI Foundry（EAF）とシャープが開催したセマンティックカメラハッカソン「Semantic Camera で未来を創ろう！」でイエナカ賞を受賞したのは、「エージェンティックホーム」だった。家の中の出来事を意味として蓄積・解析し、住人の QOL を最大化するよう家が能動的に働きかけるというコンセプトだ。

家の方から「持っていってね」と教えてくれる

出発点はシンプルだ。家を出る時に鍵をどこに置いたか思い出せない、出がけに限ってものが見つからない。小竹泉里ブレイニー氏と小林将太氏が開発した。小竹氏は「そんな時に家の方から、いつもの場所と違うから持っていってねと教えてくれると嬉しい」と語る。

最初の PoC として実装したのは、能動的ななくし物検知だ。ものの普段の置き場所を意味的に記録し、異なる場所にものを置いたまま出かけようとするとシステムが知らせてくれる。デモでは、画面上のスマートフォンを一定時間置くと「いつもの位置」として記録され、普段と違う場所に移動させると赤く表示されて定位置にないことを検出する様子が示された。

映像そのものは保存しない。YOLOv8 の画像認識と ByteTrack の物体追跡アルゴリズムが映像を処理し、その結果の JSON データだけを扱う仕組みだ。セマンティックカメラの「映像を意味に変換する」設計思想とそのまま重なる。

なくし物検知から、家全体が寄り添う未来へ

小竹氏が描く究極の姿は、ウェアラブルデバイスや AIoT 家電、家庭用ヒューマノイドと連携し、家全体が住人の暮らしを半歩先で支援するシステムだ。映像から意味を取得する範囲を広げ、ウェアラブルデバイスと連携することで、家の中の出来事と生体の変化の相関を捉えてウェルネスや QOL 向上につなげたいという。

そのままのカメラ映像を使えばコストやプライバシーの問題が大きくなるため、意味だけを抽出するセマンティックカメラの技術が家庭領域に入り込むための鍵になる。ピッチは、その可能性を具体的に示すものだった。