ABC株式会社は、映像からAIに判断させてデバイスを制御するVLM（Vision Language Model）技術を活用したいちごの自動受粉・収穫ロボットの研究開発プロジェクトを開始した。

今回のプロジェクトではTenstorrent社のAIアクセラレータ「Blackhole™ p100a」を用いてAI部分をローカルLLMで動作させる安価なハードウェア構成を採用し、2028年までにAI農業ロボットの量産体制構築を目指すという。

 

AI認知技術を活用、いちごの受粉・収穫を自動化へ

ABCは、AI・Blockchain・Cultivation分野のソフトウェア開発を行う企業。AIがレトロゲームをプレイするeスポーツ事業「Prompt League X」では、ゲーム映像からAIに状況を認識させ、コントローラーを操作する「ビジョン部分（映像からのAI制御）」の開発を担当している。

今回行われるプロジェクトでは、上記の取り組みで構築した「ゲームの映像入力→AIによる理解・判断→ゲームのコントローラー操作」というパイプラインを、現実のロボットアームに適用し、いちごの自動受粉・自動収穫へ展開する。

 

プロジェクトの中心となるのは、ABCが自社開発した映像からのAI認知とLLM制御を統合したVLM基盤「Cultiva」だ。もともとはいちごハウス内をドローン撮影し、うどんこ病などの病気の検出と出荷時期の予想のために開発されたソフトウェアだという。

同社はこのソフトウェアを活用し、以下のような技術を研究している。

• ロボットアームに搭載したカメラで、いちごや花の映像を取得
• VLM/LLM が果実・花の認識、成熟度や受粉状況の判断を実施
• 判断結果に基づいて、ロボットアームの軌道や把持動作を自動生成

現在は、比較的安価な市販ロボットアームを用いた実証実験を進め、収穫動作の安定性や再現性を検証している。

 

今後は、ロボットアーム・エンドエフェクタメーカー、カメラ・センサーメーカー、農業分野での実証フィールドを持つ事業者らとの協業を進めていく予定だ。


ABC株式会社
https://abckk.dev