「セルフ教育」実現、26年度内のサービス提供開始目指す
NECは1月29日、映像解析技術と生成AI（VLM）を活用してお手本の動作と実際の作業の違いを把握し、改善に向けたアドバイスを行う技術を開発したと発表した。
新技術を活用することで、手指を使う細かな作業から体全体を使う作業まで、改善のための適切なアドバイスをAIが担い、自動で提示。製造や物流、建設など様々な業種の作業現場で、指導者なしでも作業習熟が可能になるセルフ教育の実現を後押しする。
2025年度中に実証と製品開発を進め、26年度内のサービス提供開始を目指す。
自動生成したアドバイスの例
差異区間を検知する映像解析技術は、お手本動作と実際の作業を比べ、同じ動作が行われている区間の対応付けをする。その際、人の動きだけでなく作業対象の物体に対する「つかむ」「持つ」といったインタラクション（行動）も捉え、お手本動作と動作時間が異なっても正確に対応付けができると想定している。
従来は把握できなかった細かな作業動作の差異を検出することが可能と説明している。
物体に対するインタラクションも活用することで対応付けが正確になると想定
アドバイス文を生成する技術では、検出した差異区間映像に加えて、腰や膝の動き、手や指の形状といった骨格情報を大規模視覚言語モデル（Vision and Language Model、VLM）に入力する。映像情報に加えて骨格情報も入力することで、VLMが改善すべき作業姿勢や動作を正確に特定し、具体的なアドバイス文を生成できるようにする。
生成されたアドバイス文を該当部分の映像とともに提示することにより、物品の細かな組み立て作業や箱詰め、運搬作業など、様々な業種の現場で指導者を必要としない作業習熟を可能にし、教育コストの大幅な削減も後押ししていく方針だ。
映像情報と骨格情報を併用して作業姿勢や動作の改善アドバイス文を生成（いずれもプレスリリースより引用）
（藤原秀行）
