Home

旧ページ

開発環境

• 自分のPCの環境構築
• ロボットの環境構築
• Visual Studio Codeでの開発

ロボットの基本動作

• RobotControllerと通信する関数の作成
• RobotControllerへの命令に対応する関数の作成
• ロボットを動作させるプログラムの作成
• ロボットを発話させるプログラムの作成
• ロボットを操作するGUIプログラムの作成

カメラ

• ロボットのカメラの映像を見る
• ロボットのカメラの映像を処理するプログラムの作成
• ロボットのカメラの映像をクリックするとそちらを向くプログラムの作成
• 顔を認識するプログラムの作成
• 顔を認識しそちらを向くプログラムの作成

マイク

• 音声認識するプログラムの作成
• ロボットのマイクの入力を聞く
• ロボットのマイクの音声を認識するプログラムの作成

モジュール化と統合

• TCPでデータをパブリッシュするプログラムの作成
• TCPでデータをサブスクライブするプログラムの作成
• 画像認識結果のパブリッシャーの作成
• 音声認識結果のパブリッシャーの作成
• 画像認識結果と音声認識結果をサブスクライブして表示するプログラムの作成

---

Tips

• Windowsファイアーウォールについて
• Sotaを有線で固定IPにする
• YoloV3 Deepsortを使って人物追跡をする
• ロボットのカメラとマイクの入力を受け取り処理するプログラムの作成　(pyzmqの利用例)
• 音声認識を使った簡単な対話システム
• FFmpeg
• マルチスレッド｜スタックでの値共有例
• OpenCV｜登録された人の顔と近い顔を認識したら反応する