ROS2 + Qt Quickを使ったシステム開発

効率的にロボットシステムを構築するための仕組みであるROS。
ISPでは、ROSとGUIフレームワークであるQtを組み合わせたシステム開発も行っています。

今回はROSの新しい仕組みである「ROS2」と「Qt」を組み合わせたシステム開発ができるかどうか挑戦してみました。

前置き〜ROSとQt〜

ROSはロボット用途なのだから、GUIなんて要らないんじゃ…と思われるかもしれませんが、そんなことはありません。
ロボットが動作するための各種センサデータの可視化やロボットモジュールの細かい操作を始めとして、GUIがあると便利な場面は多々あります。

そして、ROS上のQtの扱いですが、ROSトピックの可視化等に使われるツール「rqt」がQtをベースとしているようにROS通信とQtは連携可能です。
rqtを使わず、Qt単体でもROS通信を利用したGUIツールを開発することができます。
※ 今回は rqt をカスタマイズせず、Qtでのアプリケーション作成を目的としています。

今回作成したサンプル

今回は簡単に、以下のpublisher、subscriberで動作するシステムを構築しました。

(Publisher) OpenCV で取得したカメラ画像を送信する。
(Subscriber) (Qt内) 受信した画像を逐次表示更新。

作成したサンプルは github 上に置いています。

ROS2_Qt_image_transport

環境

Ubuntu 18.04
- ROS2 crystal
- Qt 5.9
- OpenCV 3.4.0
PCにUSBカメラが接続されていること

作成のポイント

Publisher 側

Publisher 側はシンプルに、OpenCVから取得したカメラ映像を /camera/image トピックで送信しているだけです。
送信についてはROS2のサンプルを参照しました。

ros2/demos (cam2image.cpp)

ROS2ビルド可能 & QtCreatorビルド可能なQt Quickアプリケーション

Qtでのスムーズなアプリケーション構築のために、ROS2ビルドだけでなく、QtCreator上でもビルドできるようにしておきたいところです。

調べたところ、以下3つのポイントを押さえて実装することで、上記を満たすアプリケーションが作成できました。

Qt Quick アプリケーションを選択。ビルドシステムは「qmake」を選択する。
生成されたソースコード群は ros2 pkg create したディレクトリ配下の src に投下。
ROS2用のCMakeLists.txtでは src 配下を見に行くように設定。

このように実装すると、

ROS2ビルド … CMakeLists.txt の設定でビルド可能。
Qtビルド … src配下でソースコード完結しているので、そのままqmakeでビルド可能。

となります。
[参照]
Medium (Amar Lakshya) : Qt5 and ROS2 — Finally together!

ROS spin() や Qt app.exec() の扱い

ROSでsubscriberを実装する際、受信待ちのため「spin()」処理を呼ぶ必要があります。しかし、処理がブロックされてしまうため、これを呼ぶとウィンドウが動かなくなってしまいます。
逆に、Qtアプリケーションの方も「app.exec()」を呼ばないとウィンドウの処理が動きませんが、これもブロッキングな処理なので、同様にROSの方が動かなくなってしまいます。

どちらもノンブロッキングな処理に差し替えることで問題を解消することができました。