NTT 約400km離れた場所のイチゴを遠隔操作ロボットで収穫に成功 ユーザビリティの高いスマート農業

NTT、NTT東日本、NTTアグリテクノロジーの3社は、秋田-東京間直線距離約400kmをネットワーク越しに圃場にある収穫ロボットを遠隔操作しイチゴを収穫する実証実験を行った。

今回行った実証実験では、ネットワークの品質状況に応じたリアルタイムな動作制御により、高い操作性を維持した遠隔収穫作業が可能であることを確認。これにより、農業業界のみならず、様々なシーンで遠隔操作が可能となり、人手不足解消につながるとしている。

農業用ロボットで農作業を効率化

日本の農業は現在、担い手の減少や高齢化などに伴う労働力の不足に直面しており、その解決策としてスマート農業技術の導入が進んでいる。これまでのスマート農業は、主に水やり、追肥などの量や時期を最適化することで収穫量の安定化を図るものでしたが、農作業の多くは、依然として人手に頼っているのが現状である。そのため、農業用ロボットによって農作業の稼働を削減することが求められている。

特に、植物を扱う農業では、収穫や農薬散布などの作業を一律に自動化することが難しいため、人の判断を伴う遠隔操作ロボットの活用が重要である。今回の実証実験では、農作業支援者が遠隔地から収穫作業を行うことを想定し、操作性に優れた収穫ロボットの遠隔操作実証に挑戦した。

遠隔操作の実用化には、操作性の向上や収穫判断をするために、ネットワーク遅延などの不可視情報を画像処理により可視化することが有効である。この利用形態においては、遠隔操作に欠かせないネットワークやサーバ処理の低遅延化だけでなく、万が一、高負荷状態により遅延が大きくなってしまった場合にも操作性を低下させない仕組みが、広く遠隔操作を普及させるために必要となっている。

このような背景から、農業用ロボットとAIによる画像処理を活用した収穫作業を、遠隔にいる農作業支援者がスムーズに実施できることをめざし、操作性の高い遠隔収穫ロボットの操作実証に取り組んだ。

実証実験の概要と結果

遠隔収穫システム構成図

実証実験では、東京都の収穫ロボット操作者がネットワークを通じて伝送されたカメラ映像を見ながら、秋田県の圃場にあるイチゴを収穫するロボットを遠隔操作する環境を構築。

収穫ロボットのカメラが撮影した映像を画像処理用サーバがイチゴの収穫適否を判定し、その結果を映像に追加する。操作者はモニタに表示された収穫適否の情報が表示される映像を見て、ロボットを遠隔操作して秋田にあるイチゴを収穫する。

システム構成として、秋田県のイチゴ圃場に収穫ロボットと画像処理用サーバを設置し、東京都の拠点に操作端末を配置した。両拠点は直線距離で約400km離れており、光アクセス回線とインターネット回線で接続されている。この環境で、収穫ロボットを遠隔から精度高く操作し、イチゴを傷つけずに収穫できることを確認した。

また本システムに、モニタの表示情報とロボットアームの速度をエンドツーエンドの遅延時間に応じて変更する機能を実装し、本機能がイチゴの収穫作業の操作性をどの程度向上させたのかを検証。具体的にはイチゴの位置にロボットアームを1回の操作で正確に移動できた割合(成功率)を測定した。その結果、遅延が変動する環境では成功率が約50%だったが、本機能を活用することで成功率は約80%に向上し、約30%の改善が確認された。さらに、被験者の5名全員が本機能による操作性の改善を実感したと評価した。

技術のポイント

ネットワークコンピュート高速クローズドループ制御技術は、エッジサーバでの処理時間とネットワークの遅延時間をリアルタイムに状態把握し、エンドツーエンドでの遅延時間が性能要件を満たさなくなる場合には別の経路および別のサーバ処理に即座に切り替えることで安定した低遅延サービスを提供する技術である。この度、本技術の高度化を図り、スマート農業に適用可能な機能を付加した。

アプリ外からの処理時間計測

システム連携機能

従来は、画像処理アプリに独自機能を追加し、その機能を用いてアプリと連携することで、画像処理時間を計測していたが、機能の高度化により、アプリ外から入出力データを汎用画像フレームのヘッダ特性を用いて解析し、データの通過時間から処理時間を計算できるようになった。

これにより、画像処理アプリに手を加えなくても、アプリ外のサーバのみで処理時間計測を行えるようになる。

品質通知によるシステム連携

システム連携機能

従来は、通信品質が性能要件を満たさない場合、別の経路やサーバ処理に切り替える制御を行っていた。より汎用的な使い方として、通信品質の状態をリアルタイムに遠隔収穫システムに通知し、システム側で制御を行うようにした。

本機能では、通信品質を分析し、それを3段階に分類し、遠隔収穫システムへの通知を行う。遠隔収穫システムはロボットから操作端末に流れる映像に通信品質を表示し、操作者にタイムリーに通知、またロボットアームを制御する情報に対して通信品質に応じた速度制御を行い、アームを減速または停止させる。

これにより、エンドツーエンドでの遅延時間が長くなった場合でも、操作者はその状況を把握し、操作上のストレスを軽減することが可能であり、さらに、遅延時間が長くなると操作精度が低下するが、アームの速度を調整することでその誤差を軽減することができる。

各社の役割

NTT ネットワークコンピュート高速クローズドループ制御技術の実装と、遠隔操作における本技術の有用性検証
NTT東日本 ICTを活用した遠隔営農支援システムのビジネス化の検討、実証における通信環境の提供
NTTアグリテクノロジー 農業フィールドの提供と、ロボットを用いたスマート農業の有用性検証


今後の展開

今回の実証の成果は通信品質の変動に対して農業用ロボットの操作性を改善するメリットがある。人とロボットが融合した日本の新しい農業の形の実現に向け、実証実験の成果の実用化に向けて取り組むとしている。

また、ネットワークコンピュート高速クローズドループ制御技術は、農業のみならず、他業界でも直面する人手不足・技術者不足を解決する技術であるため、引き続きこの技術の実用化・汎用化を推進し、場所にとらわれない新たな働き方・労働生産性向上を具現化し、産業界の社会的課題解決をめざすとのことだ。

ABOUT THE AUTHOR / 

ロボスタ編集部

ロボスタ編集部では、ロボット業界の最新ニュースや最新レポートなどをお届けします。是非ご注目ください。

PR

連載・コラム