履歴画像を参照し、現在の状態に「過去からの変化」を加える。画像解析の考え方を表したコンセプトイメージ。
前回は、task listを現場確認の起点とし、候補の修正や判断理由を次の検討につなげる考え方を紹介しました。今回は、そこに「過去の画像」という、もう一つの判断材料を加えます。
ある場所に植生が見つかったとき、以前から同じように広がっていたのか、それとも過去の画像と比べて増えているのか。現在の画像だけでは同じ候補に見えても、この違いによって現場で確認したいことは変わります。
そこで取り組んだのが、履歴画像と現在画像を対応づけ、同じ作業帯の中で植生の変化を比較する処理です。今回は、これまでの開発で実装したこの比較処理を取り上げます。
変化を調べる前に、位置をそろえる
時系列の画像解析で最初に設計したのは、増減の計算ではなく、比較する画像の位置合わせでした。同じ場所の画像でも、写っている位置が少しずれるだけで、植生の境界に差が生じます。そのまま比較すると、位置のずれと植生の変化が混ざってしまいます。
今回の比較処理では、同じサイズの履歴画像と現在画像に、共通の植生抽出処理を適用します。そのうえで、履歴側を上下左右に少しずつ動かし、植生領域がよく重なる位置を探す構成にしました。
重なりの評価には、解析対象の範囲内での植生の一致度やカバー状況を使います。一定の対応が確認できた履歴画像を比較に採用することで、増減を読む前提を整えます。
この部分で大切なのは、画像をきれいに重ねて見せることよりも、「比較の根拠になる履歴を選ぶ」ことです。数値を計算する前に、その数値が何と何の比較なのかをそろえる。そこに、この処理の設計上のポイントがあります。
図1 小さな平行移動で植生領域の対応を調べ、比較に使う履歴を選ぶ考え方。形状やずれは説明用に模式化。
比較の基準は、現在の「同じ作業帯」
位置が対応づけられたら、次はどの範囲で比較するかを決めます。敷地全体の植生割合も一つの情報ですが、作業候補を検討するときには、確認したい場所に絞った変化が重要になります。
そこで、現在の画像から得られた作業帯を比較の基準にし、その同じ範囲に、位置合わせした過去の植生領域を重ねます。画像ごとに別々の帯を作って比較するのではなく、現在と過去を共通の範囲で評価する考え方です。
例えば、植生候補が二つに分かれていた状態から、一つにつながった状態へ変わる場合があります。候補の数だけでは変化の意味を捉えにくくても、同じ作業帯の中で植生が占める割合を見れば、広がり方を共通の基準で比較できます。
見つけた形をそのまま比べるのではなく、作業を考える単位にそろえて比べる。これまで扱ってきたレーンや領域の考え方が、ここでは時間をまたぐ比較の土台になります。
「今どのくらいあるか」と「どのくらい変わったか」を分ける
比較に使える履歴が複数ある場合は、同じ作業帯で求めた過去の植生割合を平均し、現在の割合との差を計算します。整理すると、次のような関係です。
変化量 = 現在の作業帯内の植生割合 − 採用した過去画像の同じ作業帯内の植生割合の平均
差が正であれば、現在の植生割合が履歴の平均より大きいことを示します。負であれば小さく、ゼロに近ければ割合としての差が小さい、という読み方になります。
ここで意識したのは、現在の状態と過去からの変化を、一つの評価にまとめすぎないことです。植生割合が大きくても過去とほぼ同じ場所と、割合はそれほど大きくなくても過去より増えている場所では、確認の観点が異なります。
現在の広がりは「今の状態」を、履歴との差は「過去に対する変化」を示す。この二つを分けて持つことで、検出結果に時間の文脈を加えられます。
図2 現在の作業帯を共通の比較範囲とし、現在の植生割合と、採用した過去画像の植生割合の平均との差を求める概念図。
比較できたかどうかも、結果の一部にする
履歴を使う処理では、変化量と一緒に、位置合わせの評価も返すようにしています。比較の結果だけでなく、比較が成立した条件も後から確認できる構成です。
また、比較に使える履歴が得られない場合は、現在の画像による評価を返し、履歴比較を採用しなかった理由を添えます。「過去と比べて変化が小さい」という結果と、「今回は現在の画像を基準に評価した」という結果を区別するためです。
この区別があると、結果を受け取る側は、履歴との差を見ているのか、現在の状態を見ているのかを判断できます。画面や後段の処理へ渡す情報として、比較の前提まで含めて整理することを重視しました。
変化を、現場で確認する理由につなげる
この情報をtask listと組み合わせる場面を考えると、候補を示す理由も具体的になります。「ここに植生がある」に加えて、「同じ作業帯で、過去の画像より植生割合が増えている」と説明できるからです。
現在画像と採用した履歴画像を並べ、現在の状態と変化量を一緒に確認できる形へつなげていく。そうすることで、現場側は、どの場所の何を見直すべきかを考えやすくなります。
変化の背景を理解する段階では、現場の知見も役立ちます。例えば植生割合が小さくなった場所について、草刈りの実施記録や確認コメントを合わせて見られれば、画像に表れた変化を管理の経緯と結びつけられます。こうした記録との連携も、今後発展させていきたい部分です。
開発していて面白いと感じるのは、過去画像が単なる保存データではなく、今回の候補を説明するための材料になる点です。画像を一枚ずつ解析する段階から、複数の画像の関係を使って判断を支える段階へ。小さな比較処理にも、その広がりがあります。
図3 現在の状態・履歴との差・比較条件を整理し、現場の確認理由につなげる構成例。
まとめ
今回は、過去画像と現在画像の位置を対応づけ、現在の作業帯を共通の基準として、植生割合の変化を比較する処理を紹介しました。
位置をそろえる。比較する範囲をそろえる。現在の状態と履歴との差を分けて持つ。この積み重ねによって、「どこに植生があるか」という検出結果に、「過去と比べてどう変わったか」という判断材料が加わります。
目指しているのは、画像から候補を見つけるだけでなく、その候補を今回確認する理由まで伝えられる仕組みです。現場の判断に必要な情報を、一つずつつないでいく。その設計に、草刈り自動化の面白さを感じています。
次回は、画像上で抽出した領域を、地図上で確認・編集できるデータへ変換する部分を紹介したいと思います。
本記事は開発の考え方を伝えるため、技術内容の一部を簡略化・抽象化しています。掲載画像は説明用のコンセプトイメージであり、実際の撮影画像・計測結果・運用画面ではありません。