音メディア処理研究室

 
KINECTによるLEGOマインドストームの音声入力制御

KINECTによるLEGOマインドストームの音声入力制御

http://www.youtube.com/watch?v=PC3uDn7Yelg

 Kinectから取得できる音声データを利用して、ロボットの音声操作を行っています。使用しているロボットはレゴ社が発売している教育用ロボット「LEGO MINDSTORMS NXT」です。
 Kinectで取得した音声データを音声認識器にかけて文字列に変換し、文字列に応じたモータパワーをBluetoothを介してロボットに送信することでロボットの操作を行っています。NXTの制御には「NXT.NET for LEGO Mindstorms(http://nxtnet.codeplex.com)」を使用しています。

・ロボット操作の概要
ロボットの音声操作図

1.Kinectにコマンドを発話
2.音声認識の実行
3.認識結果に応じたロボットのモータパワーを選択
4.bluetoothを通じてモータパワーを送信
5.ロボットが動作

音声認識器から出力される文字列は{前に進め、後ろに進め、右に進め、左に進め}の4通りです。

« »

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です