国立研究開発法人情報通信研究機構(東京都小金井市、理事長：徳田英幸、以下「NICT」)、株式会社クレアリンクテクノロジー(京都府精華町、代表取締役：水原隆道、以下「クレアリンク」)、株式会社エコノミカル（東京都千代田区、代表取締役：金野太一、以下「エコノミカル」)(以下、「本開発チーム」)はモバイル通信網における高品質映像伝送技術(以下、本技術)の研究開発に成功しましたのでお知らせいたします。

 

■本技術開発の概要

本開発チームは、安価な汎用マイコンRaspberry Pi（ラズベリーパイ）をベースにした新しい映像伝送プロトコル（以下、「本映像伝送プロトコル」）の開発に成功しました。本映像伝送プロトコルは、Raspberry Piの標準カメラから入力される映像をハードウェアによるH.264コーデックにより圧縮した後、独自開発した通信手順にて遠隔伝送します。本映像伝送プロトコルの革新性は、通信帯域や遅延量が不安定で大きく変動するWiFiやモバイル通信などの無線ネットワーク環境においても高いリアルタイム性と映像伝送品質を保証する点にあります。
本開発チームでは、MVNOであるロケットモバイルの格安SIMプラン（アゲアゲプラン）を用いて本映像伝送プロトコルの性能評価実験を行い、モバイル通信環境においても解像度FullHD（1920×1080ピクセル）、フレームレート30fpsのリアルタイム映像伝送に成功しました（図1）。

実験の成果は、以下のWebサイトにおいて公開しています。

実験結果公表サイト：

http://k2go.jp/hpvt/fullhd30fps/

※リンク先のウェブページでの動画は、公開用のウェブストリーミング用に再変換しているため、数秒の遅延が生じています。 カメラ映像からMVNO通信網を通しての映像取得までは非常に短い遅延で伝送・再生できています。

img1

図1　NICT小金井屋上からの Full HD/30fps映像（日本標準時の時計が映っています）

 

本Webサイトの閲覧方法は、下記の「Webサイト閲覧方法」をご覧ください。

 

■Webサイト閲覧方法
本研究開発で映像を公開するWebサイト（図１）の閲覧方法は次の通りです。Webサイトにアクセスすると10秒ごとに更新される静止画像が表示されます。静止画像画面表示から数秒後に右上のMovieボタンが点灯します（①）。Movieボタンを押下すると動画像表示画面に移動し、リアルタイム動画像が表示されます。静止画像表示画面に戻るには、右上のPictureボタンを押下します（②）。
動画像に表示されているパラメータ（③）の意味は以下の通りです。

パラメーター 説明
1920×1080 Full HDの解像度（1920×1080ピクセル）
4.00 Mbps 秒間の映像フレームの情報量（4メガビット)
30 fps 秒間の映像フレーム数（30枚）
I Period 30 Iフレーム(キーフレーム)を含む割合（30枚に1枚）
Cpmplete Frames (I/P) 6224/180512 正しく再生できた映像フレームの数
（キーフレーム6224枚/差分フレーム180512枚）
Incomplete Frames (5/10/318) 正しく再生できなかった映像フレームの数
（キーフレーム5枚/差分フレーム10枚/省略318枚）
Packets (Receive/Ignore) 2844035/953 受信パケット数
（2844035パケットを受信/953パケットを処理せずに破棄）
RTT 50.9 ms 送受信ホスト間の往復遅延時間（50.9ミリ秒）
RecvThroughput 5.33 Mbps 秒間の受信データ量（5.33メガビット）

 

Display Strictness 0 % 映像フレーム再生の基準値（0%）
PLR (Packet Loss Ratio) 0.0 % 5秒間のパケット損失割合（0.0％）
FEC Level 5 誤り訂正レベル(設定レベル5）
FEC Result (Success/Failure) 誤り訂正復元成功/復元失敗
（復元成功10パケット/復元失敗26パケット)
Captured Time Oct 26 07:57:54 10月26日07時57分54秒撮影
Displayed Time Oct 26 07:57:55 10月26日07時57分55秒再生（1秒遅れ）
Elapsed Time 38:58:02 稼働経過時間（38時間58分02秒）
Internal Delay 405 ms (desired 300+33 ms 映像フレームの受信から再生までの時間
（実測値405ミリ秒、設定値333ミリ秒）
Connected Time Oct 26 06:14:14 映像伝送の開始時刻（10月26日06時14分14秒）
Result (Time/Count） 映像フレーム再生のリセット時刻
（10月26日07時10分18秒）/総リセット回数65回）

 

なお、デモンストレーションではFullHD/30fpsでの映像伝送を行っていますが、パラメータは予告なく変更になることがあります。

 

■本技術開発の背景

近年、スマートフォンの普及とともに、YouTube等のライブストリーミングサービスにおいてポータブルなリアルタイム映像伝送サービスが普及しています。LTE/4Gなどのセルラー系モバイル網を利用するこれらのサービスでは、映像品質が十分とは言えません。またスマートフォンが主として個人ユースを想定しているため、物流、交通、観光、福祉、医療、教育、防災などの公共・産業分野では利用しづらいという点が指摘されていました。他方で、近年防犯対策等での普及が目覚ましいIP伝送型監視カメラは主に有線ネットワーク向けに開発されており、モバイル通信環境での高品質な映像伝送には適していないことが分かっています。
実用面から考えると、連続的な映像伝送は一般のデータ通信と比較してデータ量が膨大になります。これまでのモバイル通信における映像伝送の課題の一つにモバイル通信費がありました。今回の性能評価実験では、データアップリンクに特化した安価で定額制のロケットモバイル通信網を活用することでこの問題を解決しました。

 

■今後の計画

Raspberry Piは安価（最も普及しているRaspberry Pi 3は日本円で5,000円程度）であるため、本映像伝送プロトコルにより安価で高品質な映像伝送が可能となります。これにより、物流、交通、観光、福祉、医療、教育、防災など様々な分野の基盤となる高品質映像伝送システムの実現が期待されます。

例えば、本年10月に霧島連山の新燃岳が噴火し、農業や観光に大きな影響を及ぼしています。本映像伝送プロトコルにより、モバイル通信エリアであればどこからでも高品質映像でのリアルタイム火山監視が可能となります。本実証実験の結果を発展させ、今後は物流、交通、観光、福祉、医療、教育、防災など様々な市場における分野モバイル通信網を活用したリアルタイム映像データ伝送の実用化を目指してまいります。

 

■技術解説

近年のIoT技術の広がりを受けて、映像伝送の世界でもIoT化が進んでいます。多くのセンサーIoTが低帯域の低電力広域通信技術（LPWA）をベースにするのに対し、データ量が多い映像IoTでは格安SIM（MVNO）の利活用が有効となります。本映像伝送プロトコルでは、MVNOを想定した設計を行いました。本映像伝送プロトコルの概要を図2に示します。本映像伝送プロトコルの特長は以下の通りです。

  1. LTE/4Gなどのモバイル通信網でも高品質の映像伝送を実現。
  2. 動画像伝送に加えて、定常的な静止画像伝送を実現。目的やネットワーク帯域に合わせて伝送データを選択。
  3. 送信映像をエッジ側およびクラウド側で画像処理するためのプログラミング環境を提供。画像処理による抽出パラメータ（例えば河川監視では水位や流速情報）のみを伝送することが可能。

img2

図2　本映像伝送プロトコルの概要（*は用語解説あり）

■用語解説（あいうえお順）

  • IoT（Internet of Things=モノのインターネット）：様々なモノ（物）がインターネットに接続されモノどうしやモノと人が情報交換することにより相互に制御する仕組み。それによる社会の実現も指す。
  • HDMI（High-Definition Multimedia Interface=高精細度マルチメディアインターフェース）：映像・音声をデジタル信号で伝送する通信インタフェースの標準規格のこと。多くのパーソナルコンピュータのディスプレーで採用されている。
  • 264：MPEG-4 AVCとも呼ばれる動画圧縮規格。現在、多くのインターネット動画共有サービスがH.264を採用している。
  • エッジコンピューティング：センサー等の近く（またはセンサー内）の計算機によってデータを書誌することで、通信遅延を短縮したり、クラウド側の負荷を低減させる技術。
  • MIPI/CSI-2：Raspberry Piで用いられている映像伝送規格。
  • MVNO：仮想移動体通信事業者（Mobile Virtual Network Operator）。MVNOが発売するSIMは格安SIMとも呼ばれており、格安SIMを契約することで安価にモバイル通信網を利用できる。
  • LPWA：低電力広域通信技術（LPWA：Low Power Wide Area)。なるべく消費電力を抑えて遠距離通信を実現する通信方式。IoTで有効・有用な通信方式として着目されている。
  • OpenCV（Open Source Computer Vision Library）：インテルが開発・公開したオープンソースのコンピュータビジョン向けライブラリ。画像処理・画像解析および機械学習等の機能を有する。
  • コーデック（エンコード、デコード）：コーデックとは、符号化方式を使って映像データのエンコード（符号化）とデコード（復号）を双方向に行う動画像圧縮ソフトウェア、またはその規格。264はコーデックの一つである。
  • 通信プロトコル：TCP（Transmission Control Protocol）やUDP (User Datagram Protocol)などに代表されるTCP/IP通信のための通信方式の総称。
  • クラウドコンピューティング：計算機リソース（サーバー、ストレージ、データベース、ネットワーク、ソフトウェアなど) をインターネット上のクラウドに集約し、センサーデータを一元的に処理する技術。
  • Raspberry Pi（ラズベリーパイ）：ARMプロセッサを搭載した安価なシングルボードコンピュータ。イギリスのラズベリーパイ財団によって開発されている。

 

【プロフィール】

logo_nict

国立研究開発法人情報通信研究機構

所在地：東京都小金井市貫井北町4-2-1

組織概要：ICT（情報通信技術）を専門とするわが国唯一の公的研究機関として研究開発を推進するとともに、産学官連携や事業振興等を総合的に行い、豊かで安心・安全な社会の実現に取り組む国立研究開発法人。

http://www.nict.go.jp

 

logo_clt

株式会社クレアリンクテクノロジー

事業内容：通信やセキュリティ技術を中心としたソフトウェア研究開発及び製品・サービスの提供

所在地：京都府相楽郡精華町光台1-7　けいはんなプラザラボ棟7階

設立：2005年10月17日

資本金：2,600万円(2017年3月末時点)

代表者：水原　隆道（みずはら　たかみち）

代表略歴：

2006年3月奈良先端科学技術大学情報科学研究科博士後期課程修了、在学中の2005年10月、株式会社クレアリンクテクノロジーを設立し、代表取締役に就任(現任)。IP通信の高速化・最適化技術、通信セキュリティ技術の研究開発、商用化に従事し、長距離TCP/IP通信や映像リアルタイム伝送技術に関わる技術開発を中心に貢献。NICTとの共同研究も多く実施している。

http://clealink.jp

 

logo_ECONOMICAL

株式会社エコノミカル

事業内容：格安モバイルSIMサービス「ロケットモバイル」の提供等

所在地：東京都千代田区永田町2-17-3　住友不動産永田町ビル1F

設立：2015年12月17日

資本金：7,300万円(2017年3月末時点)

代表者：金野 太一(こんの たいち)

代表略歴：

2006年3月慶應義塾大学法学部政治学科卒業。同年4月株式会社光通信に入社。ゼネラルマネージャーとしてMVNO事業など様々な新規事業立ち上げに参画。2013年11月、株式会社AWESOME JAPANを設立し、代表取締役に就任(現任)。

2015年12月、株式会社エコノミカルを設立し、代表取締役社長に就任(現任)。

https://economical.co.jp/corp/

 

 

※「◆」を「@」に置き換えてご利用ください。

【研究内容、伝送技術の商用利用に関するお問合せ】

国立研究開発法人情報通信研究機構

オープンイノベーション推進本部　村田

TEL：042-327-7931

osn-system◆ml.nict.go.jp

 

株式会社クレアリンクテクノロジー

営業担当

TEL：0774-98-3873

IoT-biz◆clealink.jp

 

株式会社エコノミカル

事業推進部　山本

info◆economical.co.jp

 

【ロケットモバイルに関するお問合せ】

株式会社エコノミカル

ロケットモバイルサポートセンター

cs-support◆economical.co.jp