Sora AI Hike Navi

旅の空気を読んで、AI俳句を一緒に作ってくれる旅のコンパニオン

GPSナビ + Groveセンサ + カメラ から情景取得、AI俳句作成

Story:

旅歩きの時や自転車などに付けて、GPSナビと共にその場所の写真を定期的に撮影して残してくれる画面付きラズパイ・デバイス。

写真とそこでの気温や気候情報から、GPT APIにより自動で俳句を生成し、そこでの思い出を残します。

MakerFaire Tokyo 2023で展示販売していた、このreTerminalを使った電子工作の作り方を本にしてAmazonでも販売しています。現地で買えなかった方、こちらからどうぞ↓

Raspberry Pi + AIの書籍はこちらです↓

このデバイスを実際使用して、奥の細道を自転車で巡り、松尾芭蕉が残した俳句と並べて、そのセンスを検証しました。作成された俳句、そこからイメージされた画像からWebページを作成。

https://web.ktrips.net/

奥の細道の際、芭蕉の付き人だった河合曾良をイメージして、このデバイスをSoraと名付けました。

reTerminalの画面を使って、そこにカメラをセットし、旅行中に自動的に写真を撮ります。センサーは全てGroveのものを使い、着脱、変更可能にしました。 GPS、カメラ、モーションセンサーなどが内蔵されたコンプリートモジュールなので、他にもアプリを追加することで以下のような機能も可能です。

  • (ボタン1)GPSナビ(現在地及び目的地の地図表示。移動速度や地形などを表示。) 
  • (ボタン2)撮った写真、現在地情報からAI俳句を作成
  • (ボタン3)ChatGPTに質問し、答えてくれるAIスピーカー機能 
  • (電源ボタン)GoogleMap/StreetViewを表示し、移動する機能

GPS, Camea, Mic, Speakerなどを搭載

Movie:

Functions:

  • GPSから現在地を取得し、ナビ機能
  • 外部カメラから定期的に画像を撮り続け、旅の記録
  • 温室度センサー、位置情報から気温、天気、気候情報を取得、表示
  • (スマートスピーカー代わりに)声で応答、音楽再生、ビデオ再生など

System Architecture:

カメラ、マイク、スピーカー、GPS(Grove接続)を一体化した拡張モジュール。

GPSで取得した位置情報からNavitでナビゲーション機能をreTerminalに表示。

外部カメラで写真撮影

マイク、スピーカーを使ったスマートスピーカー機能により、音楽、動画再生なども行う。

Groveセンサ付け替えが可能で、温湿度センサ、モーションセンサー等を追加する事が可能

Movie

Devices/Sensors 使用したデバイス、センサー類:

  • reTerminal (Raspberry Pi Compute Module 4)
  • Camera: Raspberry Pi Camera V2
  • GPS Module
  • reSpeaker 2-Mic (Mic + Speaker):
  • Temp Humidity sensor
  • Distance sensor
  • Human motion sensor
  • Acceralorometer (inside reTerminal)
  • Light sensor (inside reTerminal)

Web page – https://web.ktrips.net/

MakerFaire 2023

2023/10/14, 15 @東京ビッグサイトでの出展決定!

みなさん遊びに来てください!