NEC、LLMと画像分析で災害状況を迅速に把握 番地レベルで位置特定

NECは、大規模言語モデル(LLM)と画像分析により被災状況を把握する技術を開発した。災害発生時に集まる膨大な被災現場の画像から、即時かつ的確に被災状況・場所を把握することが可能になる。

災害発生時には、被災者の避難誘導や救助活動などの初動を迅速に行なえるよう、被災状況を素早く的確に把握することが極めて重要になる。しかし、災害発生時に関係省庁が公開している降水量分布や震度分布、住民から寄せられる被害や安否についてのテキスト情報には、詳細な被災状況や場所の情報は十分に含まれておらず、迅速な初動の実現には未だ課題がある。

一方、自治体などへ提供される被災現場の画像(スマートフォン、ドライブレコーダー、街頭カメラなど)には、詳細な被災状況や場所の情報が含まれているため、現場画像の活用が期待されている。

NECが開発した技術は、初動の迅速化に向けて、膨大な現場画像から被災状況の把握に必要な画像を素早く的確に絞り込み、それらを番地レベルの正確さで地図上に表示する。

LLMで必要な画像を絞り込み

LLMによる言葉の意味解釈と画像分析による画像の類似性判定を活用することで、膨大な現場画像の中から利用者の意図に合う画像に絞り込むことができる。

従来、画像の絞り込みには画像認識技術が広く利用されてきたが、あらかじめ学習した対象物しか認識できず、絞り込める画像が限られていた。そのため、災害の種類、規模や被災地域、事態の進行状況によって多様化する利用者の意図に応じて、的確に調査することが難しかった。

開発した技術では、LLMを活用することで、フリーワードにより現場画像を絞り込むことができる。さらに、画像分析を活用し、利用者が探したい場面を画像で指定することで、言葉では表現が難しい場面でも類似した画像に絞り込むことが可能。これらを組み合わせることで、利用者の意図に合う画像に的確に絞り込め、様々に変化する被災状況に素早く対応できる。

番地レベルで場所を推定

被災場所が分からない現場画像でも、街の広い範囲をカバーする上空画像や地図データと照合することで、現場画像の場所を番地レベルの正確さで推定し、地図上に表示する。

災害時などの緊急時に提供される現場画像には、必ずしも位置情報が付与されておらず、被災場所の特定が難しい場合がある。これまでNECは、衛星画像や航空写真などの上空画像を活用して場所を推定する技術を開発してきたが、今回、地図データの地理情報を合わせて活用することで、世界最高水準の照合精度を達成し、災害時の現場画像でも高精度に場所を推定することが可能になった。

現場画像から道路、建物、信号機などの領域を自動抽出し、地図のレイアウト情報(道路や建物などの形状や配置)と照合することで場所を推定する。これにより、地震の際は建物よりも損壊リスクの低い道路の情報を積極的に使い、水害の際は道路よりも冠水リスクの低い建物の情報を照合することで、建物の一部倒壊や道路の一部浸水がある現場画像でも高精度に撮影場所を推定できる。