ロボット農機や5G、IOWN関連技術による農機の圃場間自動走行と遠隔監視制御を実現
[20/11/16]
提供元:共同通信PRワイヤー
提供元:共同通信PRワイヤー
〜複数ネットワーク最適活用技術による円滑な広域自動走行等を通じた農業の生産性向上に貢献〜
2020年11月16日
国立大学法人北海道大学
岩見沢市
日本電信電話株式会社
東日本電信電話株式会社
株式会社NTTドコモ
国立大学法人北海道大学(以下、北大)、岩見沢市、日本電信電話株式会社(以下、NTT)、 東日本電信電話株式会社(以下、NTT東日本)、株式会社NTTドコモ(以下、NTTドコモ)は、最先端のロボット農業技術に、第5世代移動通信方式(5G)、革新的ネットワーク技術IOWN※1を実現する技術の一つである複数ネットワーク最適活用技術や高精度な測位技術等を用いて、農機完全自動走行※2に向け、通信や映像の途切れを防止する等、安定的で円滑な農機の広域自動走行とその遠隔監視制御を実現しました。
<岩見沢プロジェクト(技術説明動画)>
https://youtu.be/rwai5BjUXcs
1.背景
日本の農業は長期にわたる就農人口の減少や高齢化等による人手不足が続いています。また、昨今の新型コロナウイルス感染拡大の影響により、外国人技能実習生が減少する等、農業現場の労働力減少に拍車がかかっています。このような状況において、日本の農業を維持、発展させるためには、農家当たりの耕作面積地拡大等につながる飛躍的な生産性向上が求められますが、農家自身の努力だけで実現するには限界があります。そのため、ロボット農機等を活用して、農作業を可能な限り自動化することにより、直面する人手不足を解消することが期待されています。
2.取り組み概要
このような背景のもと、北大、岩見沢市、NTT、NTT東日本、NTTドコモは2019年6月28日に産官学連携協定を締結し、最先端の農業ロボット技術と情報通信技術の活用による世界トップレベルのスマート農業およびサステイナブルなスマートアグリシティの実現に向けた研究、技術開発等を進めてきました。
これまで、農機からの高精細映像や監視センタからの発進・停止等の制御信号の安定的な伝送をめざし、5G等の高速・大容量・低遅延のネットワークを活用して実証を進めてきました。しかし農機完全自動走行対応には圃場間での移動も含め、遠隔地からトラクタやコンバイン等の農機をモニター等で監視、制御することが必要となります。
例えば、対象の農地が5Gのサービスエリア外であったり、その無線通信の特性上、遮蔽等の影響を受けて自動運転農機が必要な通信品質を得られなかった場合、遠隔地にある監視センタへ送信する監視映像が乱れたり、途切れたりすることにより遠隔監視の継続的・安定的な実施が難しい等の課題があり、その解決策として、複数のネットワークを安定的に切り替えるなどの対策が有効です。
そこで、今回の実証では、以下5つの技術を実現し、その有効性を確認しました(図1)。
まず、(A)IOWNを実現する技術の一つとなる協調型インフラ基盤技術(マルチ無線品質予測技術(Cradio)※3、E2Eオーバレイネットワーク技術)を用いて、複数のネットワークを跨って農機が自動走行する中で、通信品質の変動をAIが予測して通信品質が劣化する前に適切なネットワークに自動で切り替えることで、遠隔監視を中断させることの無い、安定的な自動走行を実現しました。岩見沢市の農道で実際に農機を自動走行させ、同技術を用いて通信を中断させず自動でのネットワーク切り替えに成功した実証結果を図2に示します。これらの技術は、アプリケーションに利用ネットワークを意識させない、ナチュラルな利用を可能とする、将来の移動固定融合サービスにつながる技術の1つとしても位置づけられます。
また、(B)ネットワーク協調デバイス制御技術を用いて、ネットワークの品質変化に応じた農機の制御指示を実現し、監視映像が伝送できないレベルにネットワーク品質が劣化した際に、自動でトラクタを安全に停止させるなど、その有効性を確認しました。
さらに、(C)監視拠点で映像をパケットレベルで低遅延に複製することでネットワーク負荷を低減しながら,遠隔監視と画像解析などの複数の用途でのリアルタイム映像の同時利用を可能とするデータストリームアシスト技術、また、深層学習では、サーバ収容率を高めるために、複数の映像ストリームを効率的に処理するストリームマージ機能やCPUやGPUなど様々なリソースを最適化する推論処理基盤技術により、処理を効率化しています。これらの機能により監視者の負担軽減につながる効率的な遠隔監視を実現し、その有効性を確認しました(図3)。
また、農機が自動走行するためには、高精度な測位が必要です。そのため、衛星信号を受信する固定局を農機の周辺環境に設置し、固定局から位置補正情報を配信することが求められます。従来は、農家が当該固定局を設置することから、費用面や運用面で農家の負担となる等の課題がありました。
そこで、(D)農家による固定局の設置が不要となる、「docomo IoT高精度GNSS※4位置情報サービス」※5を用いた農機自動走行の実証を行い、高精度の測位を実現し、有効性を確認しました。これにより、低コストで高精度な測位情報の利用が可能となります。
さらに、(E)IOWNを実現する技術の一つであるクラウドGNSS測位技術を用いた農機の自動走行の実証も行いました。農機に搭載した受信機で受信されたGNSS信号と固定局からの位置補正情報を使用して、クラウド上で測位演算処理を行い、リアルタイムの測位結果を農機の自動走行の制御に使用することで、その有効性を確認しました (図4)。
クラウド上で測位の演算処理を行うことで、農機のみならず、PCやタブレット等の機器でも同時に位置情報の利用が可能になること、また、樹木などの障害物が圃場周辺にある環境下で、利用にふさわしくない衛星信号を測位処理に利用して測位精度が劣化する課題に対しても、クラウド上の潤沢な計算リソースを使い、適切な衛星信号を選択することで高精度な測位を実現することが可能となります。
図1.実証全体概要図
【画像:https://kyodonewsprwire.jp/img/202011167151-O9-uVd5XwGC】
3.参画企業等
別紙の通り
4.今後の展開
今後は、農機自動走行の安全性をさらに高めるため、衛星信号を用いた測位可能なエリア圏外でも農機自動走行を可能にする路面画像認識による測位補完技術(図5)の実証も行います。
また、ドローンや草刈・収穫ロボット等農機以外への遠隔監視制御対象の拡大や5Gや現行光ネットワークよりもさらに高速・大容量・低遅延なIOWN関連技術の導入を通じた、より多数の農機の遠隔監視制御、より広域での農業の自動化をめざします。
さらには、農業の生産分野にとどまらず、流通・販売・消費分野にまたがるフードバリューチェーンへと取り組みを拡大させるとともに、そこで構築した通信インフラを防災や健康等他分野での活用に広げる等、スマート農業を軸とした、生活に必要なさまざまなサービスのスマート化へとつながるスマートアグリシティの実現をめざします。
上記の取り組みに加え、産官学連携のメンバが主体となり、新たに農機メーカのクボタや日立ソリューションズ、スマートリンク北海道等も加わったコンソーシアムを組成し、総務省の「地域課題解決型ローカル5G※7等の実現に向けた開発実証等」、農林水産省の「スマート農業実証プロジェクト(ローカル5G)」事業も進めることにより取り組みを融合・深化させ、農業分野の課題解決、競争力強化に貢献してまいります。
なお、本技術については、11月17日から20日に開催されるNTT R&Dフォーラム2020 Connectにて紹介します。
<NTT R&Dフォーラム2020 Connect> https://www.rd.ntt/forum/
別紙
【表:https://kyodonewsprwire.jp/prwfile/release/M104717/202011167151/_prw_PT1fl_ylqgG6do.png】
図2.複数のネットワークを跨る農機自動走行の実証結果
【画像:https://kyodonewsprwire.jp/img/202011167151-O4-692iACD0】
図3.IOWN(ネットワーク系技術)関連技術を用いた実証内容
【画像:https://kyodonewsprwire.jp/img/202011167151-O5-9T3PO3Q6】
図4. IOWN(クラウドGNSS測位技術)関連技術を用いた実証内容
【画像:https://kyodonewsprwire.jp/img/202011167151-O6-yw48W1N5】
図5.路面画像による位置推定概要(北大)
【画像:https://kyodonewsprwire.jp/img/202011167151-O8-DPfkn2k6】
※1 NTTが現在検討している光ベースの革新的なネットワークの構想IOWN(アイオン)「Innovative Optical &
Wireless Network」 URL:http://www.ntt.co.jp/news2019/1905/190509b.html
※2 無人状態での完全自動走行。使用者はモニター等により、ロボット農機の遠隔監視を行う
※3 マルチ無線プロアクティブ制御技術(群)。複数の技術からなるIOWNの構成技術。本実証では品質予測技術
を適用。URL:https://www.rd.ntt/iown/0004.html
※4 Global Navigation Satellite System(全球測位衛星システム):衛星測位システムの総称
※5 NTTドコモの誤差数センチメートルの高精度測位を提供可能とするサービス
※6 広帯域移動無線アクセスシステム(Broadband Wireless Access)
※7 地域の様々な主体が自らの建物や敷地内でスポット的に柔軟にネットワークを構築できる5Gシステム
※8 NTT東日本が提供するAI・IoT技術の実証環境。産官学連携による新たな社会課題解決・事業共創をめざ
す場
※9 GEONET(GNSS Earth Observation Network System):全国約1,300ヶ所に設置された電子基準点と中央局か
らなる、高密度かつ高精度な測量網の構築と広域の地殻変動の監視を目的としたGNSS連続観測システム
※10 Ntrip(Networked Transport of RTCM via Internet Protocol):GNSSレシーバ観測データや測位結果をIP網
で転送するためのHTTPベースのプロトコル Ntrip Casterはゲートウェイサーバ装置
※11 NEMA:米国海洋電子機器協会(National Marine Electronics Association)が 規定するシリアル通信および
アプリケーションレイヤプロトコル 正式名称はNMEA0183
2020年11月16日
国立大学法人北海道大学
岩見沢市
日本電信電話株式会社
東日本電信電話株式会社
株式会社NTTドコモ
国立大学法人北海道大学(以下、北大)、岩見沢市、日本電信電話株式会社(以下、NTT)、 東日本電信電話株式会社(以下、NTT東日本)、株式会社NTTドコモ(以下、NTTドコモ)は、最先端のロボット農業技術に、第5世代移動通信方式(5G)、革新的ネットワーク技術IOWN※1を実現する技術の一つである複数ネットワーク最適活用技術や高精度な測位技術等を用いて、農機完全自動走行※2に向け、通信や映像の途切れを防止する等、安定的で円滑な農機の広域自動走行とその遠隔監視制御を実現しました。
<岩見沢プロジェクト(技術説明動画)>
https://youtu.be/rwai5BjUXcs
1.背景
日本の農業は長期にわたる就農人口の減少や高齢化等による人手不足が続いています。また、昨今の新型コロナウイルス感染拡大の影響により、外国人技能実習生が減少する等、農業現場の労働力減少に拍車がかかっています。このような状況において、日本の農業を維持、発展させるためには、農家当たりの耕作面積地拡大等につながる飛躍的な生産性向上が求められますが、農家自身の努力だけで実現するには限界があります。そのため、ロボット農機等を活用して、農作業を可能な限り自動化することにより、直面する人手不足を解消することが期待されています。
2.取り組み概要
このような背景のもと、北大、岩見沢市、NTT、NTT東日本、NTTドコモは2019年6月28日に産官学連携協定を締結し、最先端の農業ロボット技術と情報通信技術の活用による世界トップレベルのスマート農業およびサステイナブルなスマートアグリシティの実現に向けた研究、技術開発等を進めてきました。
これまで、農機からの高精細映像や監視センタからの発進・停止等の制御信号の安定的な伝送をめざし、5G等の高速・大容量・低遅延のネットワークを活用して実証を進めてきました。しかし農機完全自動走行対応には圃場間での移動も含め、遠隔地からトラクタやコンバイン等の農機をモニター等で監視、制御することが必要となります。
例えば、対象の農地が5Gのサービスエリア外であったり、その無線通信の特性上、遮蔽等の影響を受けて自動運転農機が必要な通信品質を得られなかった場合、遠隔地にある監視センタへ送信する監視映像が乱れたり、途切れたりすることにより遠隔監視の継続的・安定的な実施が難しい等の課題があり、その解決策として、複数のネットワークを安定的に切り替えるなどの対策が有効です。
そこで、今回の実証では、以下5つの技術を実現し、その有効性を確認しました(図1)。
まず、(A)IOWNを実現する技術の一つとなる協調型インフラ基盤技術(マルチ無線品質予測技術(Cradio)※3、E2Eオーバレイネットワーク技術)を用いて、複数のネットワークを跨って農機が自動走行する中で、通信品質の変動をAIが予測して通信品質が劣化する前に適切なネットワークに自動で切り替えることで、遠隔監視を中断させることの無い、安定的な自動走行を実現しました。岩見沢市の農道で実際に農機を自動走行させ、同技術を用いて通信を中断させず自動でのネットワーク切り替えに成功した実証結果を図2に示します。これらの技術は、アプリケーションに利用ネットワークを意識させない、ナチュラルな利用を可能とする、将来の移動固定融合サービスにつながる技術の1つとしても位置づけられます。
また、(B)ネットワーク協調デバイス制御技術を用いて、ネットワークの品質変化に応じた農機の制御指示を実現し、監視映像が伝送できないレベルにネットワーク品質が劣化した際に、自動でトラクタを安全に停止させるなど、その有効性を確認しました。
さらに、(C)監視拠点で映像をパケットレベルで低遅延に複製することでネットワーク負荷を低減しながら,遠隔監視と画像解析などの複数の用途でのリアルタイム映像の同時利用を可能とするデータストリームアシスト技術、また、深層学習では、サーバ収容率を高めるために、複数の映像ストリームを効率的に処理するストリームマージ機能やCPUやGPUなど様々なリソースを最適化する推論処理基盤技術により、処理を効率化しています。これらの機能により監視者の負担軽減につながる効率的な遠隔監視を実現し、その有効性を確認しました(図3)。
また、農機が自動走行するためには、高精度な測位が必要です。そのため、衛星信号を受信する固定局を農機の周辺環境に設置し、固定局から位置補正情報を配信することが求められます。従来は、農家が当該固定局を設置することから、費用面や運用面で農家の負担となる等の課題がありました。
そこで、(D)農家による固定局の設置が不要となる、「docomo IoT高精度GNSS※4位置情報サービス」※5を用いた農機自動走行の実証を行い、高精度の測位を実現し、有効性を確認しました。これにより、低コストで高精度な測位情報の利用が可能となります。
さらに、(E)IOWNを実現する技術の一つであるクラウドGNSS測位技術を用いた農機の自動走行の実証も行いました。農機に搭載した受信機で受信されたGNSS信号と固定局からの位置補正情報を使用して、クラウド上で測位演算処理を行い、リアルタイムの測位結果を農機の自動走行の制御に使用することで、その有効性を確認しました (図4)。
クラウド上で測位の演算処理を行うことで、農機のみならず、PCやタブレット等の機器でも同時に位置情報の利用が可能になること、また、樹木などの障害物が圃場周辺にある環境下で、利用にふさわしくない衛星信号を測位処理に利用して測位精度が劣化する課題に対しても、クラウド上の潤沢な計算リソースを使い、適切な衛星信号を選択することで高精度な測位を実現することが可能となります。
図1.実証全体概要図
【画像:https://kyodonewsprwire.jp/img/202011167151-O9-uVd5XwGC】
3.参画企業等
別紙の通り
4.今後の展開
今後は、農機自動走行の安全性をさらに高めるため、衛星信号を用いた測位可能なエリア圏外でも農機自動走行を可能にする路面画像認識による測位補完技術(図5)の実証も行います。
また、ドローンや草刈・収穫ロボット等農機以外への遠隔監視制御対象の拡大や5Gや現行光ネットワークよりもさらに高速・大容量・低遅延なIOWN関連技術の導入を通じた、より多数の農機の遠隔監視制御、より広域での農業の自動化をめざします。
さらには、農業の生産分野にとどまらず、流通・販売・消費分野にまたがるフードバリューチェーンへと取り組みを拡大させるとともに、そこで構築した通信インフラを防災や健康等他分野での活用に広げる等、スマート農業を軸とした、生活に必要なさまざまなサービスのスマート化へとつながるスマートアグリシティの実現をめざします。
上記の取り組みに加え、産官学連携のメンバが主体となり、新たに農機メーカのクボタや日立ソリューションズ、スマートリンク北海道等も加わったコンソーシアムを組成し、総務省の「地域課題解決型ローカル5G※7等の実現に向けた開発実証等」、農林水産省の「スマート農業実証プロジェクト(ローカル5G)」事業も進めることにより取り組みを融合・深化させ、農業分野の課題解決、競争力強化に貢献してまいります。
なお、本技術については、11月17日から20日に開催されるNTT R&Dフォーラム2020 Connectにて紹介します。
<NTT R&Dフォーラム2020 Connect> https://www.rd.ntt/forum/
別紙
【表:https://kyodonewsprwire.jp/prwfile/release/M104717/202011167151/_prw_PT1fl_ylqgG6do.png】
図2.複数のネットワークを跨る農機自動走行の実証結果
【画像:https://kyodonewsprwire.jp/img/202011167151-O4-692iACD0】
図3.IOWN(ネットワーク系技術)関連技術を用いた実証内容
【画像:https://kyodonewsprwire.jp/img/202011167151-O5-9T3PO3Q6】
図4. IOWN(クラウドGNSS測位技術)関連技術を用いた実証内容
【画像:https://kyodonewsprwire.jp/img/202011167151-O6-yw48W1N5】
図5.路面画像による位置推定概要(北大)
【画像:https://kyodonewsprwire.jp/img/202011167151-O8-DPfkn2k6】
※1 NTTが現在検討している光ベースの革新的なネットワークの構想IOWN(アイオン)「Innovative Optical &
Wireless Network」 URL:http://www.ntt.co.jp/news2019/1905/190509b.html
※2 無人状態での完全自動走行。使用者はモニター等により、ロボット農機の遠隔監視を行う
※3 マルチ無線プロアクティブ制御技術(群)。複数の技術からなるIOWNの構成技術。本実証では品質予測技術
を適用。URL:https://www.rd.ntt/iown/0004.html
※4 Global Navigation Satellite System(全球測位衛星システム):衛星測位システムの総称
※5 NTTドコモの誤差数センチメートルの高精度測位を提供可能とするサービス
※6 広帯域移動無線アクセスシステム(Broadband Wireless Access)
※7 地域の様々な主体が自らの建物や敷地内でスポット的に柔軟にネットワークを構築できる5Gシステム
※8 NTT東日本が提供するAI・IoT技術の実証環境。産官学連携による新たな社会課題解決・事業共創をめざ
す場
※9 GEONET(GNSS Earth Observation Network System):全国約1,300ヶ所に設置された電子基準点と中央局か
らなる、高密度かつ高精度な測量網の構築と広域の地殻変動の監視を目的としたGNSS連続観測システム
※10 Ntrip(Networked Transport of RTCM via Internet Protocol):GNSSレシーバ観測データや測位結果をIP網
で転送するためのHTTPベースのプロトコル Ntrip Casterはゲートウェイサーバ装置
※11 NEMA:米国海洋電子機器協会(National Marine Electronics Association)が 規定するシリアル通信および
アプリケーションレイヤプロトコル 正式名称はNMEA0183