车载立体摄像机对落体物体的图像检测

Q4 Engineering
Hasegawa Takefumi, K. Akiyama, Hidetoshi Kambe, Yasushi Sugama, M. Abukawa
{"title":"车载立体摄像机对落体物体的图像检测","authors":"Hasegawa Takefumi, K. Akiyama, Hidetoshi Kambe, Yasushi Sugama, M. Abukawa","doi":"10.3169/itej.75.572","DOIUrl":null,"url":null,"abstract":"道路上の落下物は数多く存在し,国土交通省の調査によ ると直轄国道道路の落下物の集計数は年間約50万件1)にな る.この件数を平均化すると1日あたりに約1350件以上の 落下物が発生している.落下物の種類として多いのはビ ニールシートや紙類であるが,タイヤや建材,冷蔵庫など の大型落下物もある.自動車と大型落下物との衝突は重大 な事故につながるため,自動車前方にある落下物を即時に 検出し,落下物との衝突を避けることが重要になる. 近年,自動車には衝突被害軽減ブレーキやアダプティブ クルーズコントロールなど,車載センサの認識結果を用い た先進ドライバアシスタントシステム(ADAS)が搭載され 始めており,これらの機能を用いて落下物との衝突を回避 するADAS機能付き車両が期待されている. 車載カメラの画像認識によって,自車両前方の先行車両 や歩行者を画像識別する技術2)3)が開発されているが,路 面上の落下物は多種多様なものが想定されるため,画像情 報からあらゆる物体を画像識別して落下物を検知するのは 困難である. このため,本稿の検知手法では車載ステレオカメラを使 用し,車両前方の3次元形状を計測することで物体を画像 識別することなく落下物を検知した.車載ステレオカメラ は検知対象物までの距離計測が可能なため,衝突被害軽減 ブレーキ機能付き車両等に多く搭載されており,さまざま な障害物検知用アルゴリズム4)~7)が提案されている.ステ レオマッチング手法には,ステレオ画像の局所的なマッチ ング手法8)9)と大域的なマッチング手法10)~12)があり,こ のステレオマッチングと移動ベクトルの算出を組み合わせ た手法13)14)が提案されている. これらの障害物検知用アルゴリズムは,荷物落下後の障 害物を検知対象とするため,車両前方を走行する先行車両 の荷台に積まれた荷物が突然に落下した場合には落下物を 即時に検知することが困難となり,前方車両と自車両との 車間距離が短いと,衝突回避用の走行指示が間に合わずに 荷物と衝突する危険性が高くなる. ステレオカメラを用いて物体の移動ベクトルから移動物 体を検知する手法15)やパーティクルフィルタを用いた移動 物体の分離検知手法16)があり,静止物体と移動物体の区別 による移動物体検知や複数人の歩行者の群れから分離する 歩行者検知に使用されている. 車載ステレオカメラのデプス画像を3次元点群に変換し, 深層学習の点群処理用ネットワークモデル17)を適用して同 一物体を検出する手法18)があり,前方車両検知に使用され ている. 本稿では,車両前方を走行する先行車両の荷台に積まれた 荷物が突然に落下した場合でも,落下物との衝突を回避する ために,実験車両へ搭載した車載ステレオカメラで即時に荷 物落下を検知する手法を開発した.本手法では車載ステレオ カメラで判別した同一物体の撮影画像範囲内の移動ベクトル あらまし 本稿では車両前方の落下物を車載ステレオカメラで検知する手法を提案する.本検知手法は車載ステレ オカメラで計測した撮影画像から車両前方のデプス画像を算出し,そのデプス画像から走行路面上にある立体物を検 出する.検出した複数の立体物が同一物体か別物体かを判別し,同一物体の撮影画像範囲内の移動ベクトルを解析す ることで車両前方を走行する先行車両の荷台から荷物が落下したことを即時に検知する.この落下物を追跡すること で移動軌跡を算出し,車両と落下物との衝突を避ける.本検知手法の評価として,車載ステレオカメラを搭載した実 験車両にて車速約60 km/hで走行し,車両前方約30m先に走行する先行車両の荷台から荷物を落下させ,その落下物 の検知状況を確認した.本評価により,先行車両から急に荷物が落下した場合でも衝突回避のために落下物を即時に 検知可能なことを確認した.","PeriodicalId":39325,"journal":{"name":"Kyokai Joho Imeji Zasshi/Journal of the Institute of Image Information and Television Engineers","volume":null,"pages":null},"PeriodicalIF":0.0000,"publicationDate":"2021-01-01","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":"0","resultStr":"{\"title\":\"Image Detection of Falling Object by Vehicle Mounted Stereo-Camera\",\"authors\":\"Hasegawa Takefumi, K. Akiyama, Hidetoshi Kambe, Yasushi Sugama, M. Abukawa\",\"doi\":\"10.3169/itej.75.572\",\"DOIUrl\":null,\"url\":null,\"abstract\":\"道路上の落下物は数多く存在し,国土交通省の調査によ ると直轄国道道路の落下物の集計数は年間約50万件1)にな る.この件数を平均化すると1日あたりに約1350件以上の 落下物が発生している.落下物の種類として多いのはビ ニールシートや紙類であるが,タイヤや建材,冷蔵庫など の大型落下物もある.自動車と大型落下物との衝突は重大 な事故につながるため,自動車前方にある落下物を即時に 検出し,落下物との衝突を避けることが重要になる. 近年,自動車には衝突被害軽減ブレーキやアダプティブ クルーズコントロールなど,車載センサの認識結果を用い た先進ドライバアシスタントシステム(ADAS)が搭載され 始めており,これらの機能を用いて落下物との衝突を回避 するADAS機能付き車両が期待されている. 車載カメラの画像認識によって,自車両前方の先行車両 や歩行者を画像識別する技術2)3)が開発されているが,路 面上の落下物は多種多様なものが想定されるため,画像情 報からあらゆる物体を画像識別して落下物を検知するのは 困難である. このため,本稿の検知手法では車載ステレオカメラを使 用し,車両前方の3次元形状を計測することで物体を画像 識別することなく落下物を検知した.車載ステレオカメラ は検知対象物までの距離計測が可能なため,衝突被害軽減 ブレーキ機能付き車両等に多く搭載されており,さまざま な障害物検知用アルゴリズム4)~7)が提案されている.ステ レオマッチング手法には,ステレオ画像の局所的なマッチ ング手法8)9)と大域的なマッチング手法10)~12)があり,こ のステレオマッチングと移動ベクトルの算出を組み合わせ た手法13)14)が提案されている. これらの障害物検知用アルゴリズムは,荷物落下後の障 害物を検知対象とするため,車両前方を走行する先行車両 の荷台に積まれた荷物が突然に落下した場合には落下物を 即時に検知することが困難となり,前方車両と自車両との 車間距離が短いと,衝突回避用の走行指示が間に合わずに 荷物と衝突する危険性が高くなる. ステレオカメラを用いて物体の移動ベクトルから移動物 体を検知する手法15)やパーティクルフィルタを用いた移動 物体の分離検知手法16)があり,静止物体と移動物体の区別 による移動物体検知や複数人の歩行者の群れから分離する 歩行者検知に使用されている. 車載ステレオカメラのデプス画像を3次元点群に変換し, 深層学習の点群処理用ネットワークモデル17)を適用して同 一物体を検出する手法18)があり,前方車両検知に使用され ている. 本稿では,車両前方を走行する先行車両の荷台に積まれた 荷物が突然に落下した場合でも,落下物との衝突を回避する ために,実験車両へ搭載した車載ステレオカメラで即時に荷 物落下を検知する手法を開発した.本手法では車載ステレオ カメラで判別した同一物体の撮影画像範囲内の移動ベクトル あらまし 本稿では車両前方の落下物を車載ステレオカメラで検知する手法を提案する.本検知手法は車載ステレ オカメラで計測した撮影画像から車両前方のデプス画像を算出し,そのデプス画像から走行路面上にある立体物を検 出する.検出した複数の立体物が同一物体か別物体かを判別し,同一物体の撮影画像範囲内の移動ベクトルを解析す ることで車両前方を走行する先行車両の荷台から荷物が落下したことを即時に検知する.この落下物を追跡すること で移動軌跡を算出し,車両と落下物との衝突を避ける.本検知手法の評価として,車載ステレオカメラを搭載した実 験車両にて車速約60 km/hで走行し,車両前方約30m先に走行する先行車両の荷台から荷物を落下させ,その落下物 の検知状況を確認した.本評価により,先行車両から急に荷物が落下した場合でも衝突回避のために落下物を即時に 検知可能なことを確認した.\",\"PeriodicalId\":39325,\"journal\":{\"name\":\"Kyokai Joho Imeji Zasshi/Journal of the Institute of Image Information and Television Engineers\",\"volume\":null,\"pages\":null},\"PeriodicalIF\":0.0000,\"publicationDate\":\"2021-01-01\",\"publicationTypes\":\"Journal Article\",\"fieldsOfStudy\":null,\"isOpenAccess\":false,\"openAccessPdf\":\"\",\"citationCount\":\"0\",\"resultStr\":null,\"platform\":\"Semanticscholar\",\"paperid\":null,\"PeriodicalName\":\"Kyokai Joho Imeji Zasshi/Journal of the Institute of Image Information and Television Engineers\",\"FirstCategoryId\":\"1085\",\"ListUrlMain\":\"https://doi.org/10.3169/itej.75.572\",\"RegionNum\":0,\"RegionCategory\":null,\"ArticlePicture\":[],\"TitleCN\":null,\"AbstractTextCN\":null,\"PMCID\":null,\"EPubDate\":\"\",\"PubModel\":\"\",\"JCR\":\"Q4\",\"JCRName\":\"Engineering\",\"Score\":null,\"Total\":0}","platform":"Semanticscholar","paperid":null,"PeriodicalName":"Kyokai Joho Imeji Zasshi/Journal of the Institute of Image Information and Television Engineers","FirstCategoryId":"1085","ListUrlMain":"https://doi.org/10.3169/itej.75.572","RegionNum":0,"RegionCategory":null,"ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":null,"EPubDate":"","PubModel":"","JCR":"Q4","JCRName":"Engineering","Score":null,"Total":0}
引用次数: 0

摘要

道路上有很多坠落物,根据国土交通省的调查,直辖国道道路上坠落物的统计数量为每年约50万件(1)。平均下来,每天约有1350件以上的坠落物发生。坠落物的种类多为塑料薄膜和纸类,也有轮胎、建材、冰箱等大型坠落物。汽车与大型坠落物的碰撞会导致严重的事故,因此及时检测出汽车前方的坠落物,避免与坠落物碰撞就显得尤为重要。近年来,汽车上搭载了基于车载传感器识别结果的先进驾驶辅助系统(ADAS),如减轻碰撞损害的刹车和自适应巡航控制系统等。目前尚属首次,使用上述功能可避免与坠落物碰撞的带有ADAS功能的车辆备受期待。根据车载摄像机的图像识别,开发出了对自己车辆前方的前车和行人进行图像识别的技术2)3)。由于路面上的掉落物可能是多种多样的物体,因此图像信息从报告中对所有物体进行图像识别并检测坠落物是很困难的。因此,本文的检测方法使用车载立体摄像机,通过测量车辆前方的三维形状来对物体进行图像识别。没有识别就检测到了掉落物。车载立体声摄像机由于能够测量到检测对象的距离,所以多配备在带有减轻碰撞伤害制动功能的车辆等上,提出了各种障碍物检测用算法4)~7)。leo匹配方法包括立体声图像的局部匹配方法8)9)和全局匹配方法10)~12),将立体声匹配和移动向量的计算组合起来提出了方法13)14)。由于这些障碍物检测用算法的检测对象是行李掉落后的障碍物,所以当在车辆前方行驶的前车的货斗上装载的行李突然掉落时,可以将掉落物识别为障碍物。即时检测变得困难,如果前方车辆与自己车辆的车距较短,就会来不及做出避免碰撞的行驶指示而与货物发生碰撞的危险性变高。有检测身体的方法15)和使用分区过滤器的移动物体分离检测方法16),被用于通过区分静止物体和移动物体的移动物体检测和从多人的步行者群中分离的步行者检测。将车载立体摄像机的解码图像转换为三维点群,应用深度学习的点群处理用网络模型17)检测同一物体的方法18),被用于前方车辆检测。在本论文中,为了避免在车辆前方行驶的先行车辆的货厢内装载的货物突然掉落的情况下与掉落物发生碰撞,开发出了利用搭载在实验车辆上的车载立体摄像机即刻检测货物掉落的方法。在本方法中,提出了用车载立体摄像机来检测辨别出的同一物体的摄影图像范围内的移动矢量的概要在本发明中,提出了用车载立体摄像机来检测车辆前方的落下物的方法。该检测手法是根据车载立体声摄像机测得的摄影图像计算出车辆前方的解码图像,并根据该解码图像检测出行驶路面上的立体物。判断检测出的多个立体物是同一物体还是不同物体,分析同一物体在摄影图像范围内的移动矢量这样就能立即检测到在车辆前方行驶的前车的货厢中有货物掉落,通过追踪掉落物计算出移动轨迹,避免车辆与掉落物发生碰撞。作为本检测手法的评价,在配备车载立体摄像机的实验车辆上以约60km /h的车速行驶,在车辆前方约30m处从行驶的先行车辆的货厢掉落货物,并确认了掉落物的检测状况。通过本评价,确认了即使在行李从前车突然掉落的情况下,也能立即检测到掉落物以避免碰撞。
本文章由计算机程序翻译,如有差异,请以英文原文为准。
Image Detection of Falling Object by Vehicle Mounted Stereo-Camera
道路上の落下物は数多く存在し,国土交通省の調査によ ると直轄国道道路の落下物の集計数は年間約50万件1)にな る.この件数を平均化すると1日あたりに約1350件以上の 落下物が発生している.落下物の種類として多いのはビ ニールシートや紙類であるが,タイヤや建材,冷蔵庫など の大型落下物もある.自動車と大型落下物との衝突は重大 な事故につながるため,自動車前方にある落下物を即時に 検出し,落下物との衝突を避けることが重要になる. 近年,自動車には衝突被害軽減ブレーキやアダプティブ クルーズコントロールなど,車載センサの認識結果を用い た先進ドライバアシスタントシステム(ADAS)が搭載され 始めており,これらの機能を用いて落下物との衝突を回避 するADAS機能付き車両が期待されている. 車載カメラの画像認識によって,自車両前方の先行車両 や歩行者を画像識別する技術2)3)が開発されているが,路 面上の落下物は多種多様なものが想定されるため,画像情 報からあらゆる物体を画像識別して落下物を検知するのは 困難である. このため,本稿の検知手法では車載ステレオカメラを使 用し,車両前方の3次元形状を計測することで物体を画像 識別することなく落下物を検知した.車載ステレオカメラ は検知対象物までの距離計測が可能なため,衝突被害軽減 ブレーキ機能付き車両等に多く搭載されており,さまざま な障害物検知用アルゴリズム4)~7)が提案されている.ステ レオマッチング手法には,ステレオ画像の局所的なマッチ ング手法8)9)と大域的なマッチング手法10)~12)があり,こ のステレオマッチングと移動ベクトルの算出を組み合わせ た手法13)14)が提案されている. これらの障害物検知用アルゴリズムは,荷物落下後の障 害物を検知対象とするため,車両前方を走行する先行車両 の荷台に積まれた荷物が突然に落下した場合には落下物を 即時に検知することが困難となり,前方車両と自車両との 車間距離が短いと,衝突回避用の走行指示が間に合わずに 荷物と衝突する危険性が高くなる. ステレオカメラを用いて物体の移動ベクトルから移動物 体を検知する手法15)やパーティクルフィルタを用いた移動 物体の分離検知手法16)があり,静止物体と移動物体の区別 による移動物体検知や複数人の歩行者の群れから分離する 歩行者検知に使用されている. 車載ステレオカメラのデプス画像を3次元点群に変換し, 深層学習の点群処理用ネットワークモデル17)を適用して同 一物体を検出する手法18)があり,前方車両検知に使用され ている. 本稿では,車両前方を走行する先行車両の荷台に積まれた 荷物が突然に落下した場合でも,落下物との衝突を回避する ために,実験車両へ搭載した車載ステレオカメラで即時に荷 物落下を検知する手法を開発した.本手法では車載ステレオ カメラで判別した同一物体の撮影画像範囲内の移動ベクトル あらまし 本稿では車両前方の落下物を車載ステレオカメラで検知する手法を提案する.本検知手法は車載ステレ オカメラで計測した撮影画像から車両前方のデプス画像を算出し,そのデプス画像から走行路面上にある立体物を検 出する.検出した複数の立体物が同一物体か別物体かを判別し,同一物体の撮影画像範囲内の移動ベクトルを解析す ることで車両前方を走行する先行車両の荷台から荷物が落下したことを即時に検知する.この落下物を追跡すること で移動軌跡を算出し,車両と落下物との衝突を避ける.本検知手法の評価として,車載ステレオカメラを搭載した実 験車両にて車速約60 km/hで走行し,車両前方約30m先に走行する先行車両の荷台から荷物を落下させ,その落下物 の検知状況を確認した.本評価により,先行車両から急に荷物が落下した場合でも衝突回避のために落下物を即時に 検知可能なことを確認した.
求助全文
通过发布文献求助,成功后即可免费获取论文全文。 去求助
来源期刊
CiteScore
0.10
自引率
0.00%
发文量
11
×
引用
GB/T 7714-2015
复制
MLA
复制
APA
复制
导出至
BibTeX EndNote RefMan NoteFirst NoteExpress
×
提示
您的信息不完整,为了账户安全,请先补充。
现在去补充
×
提示
您因"违规操作"
具体请查看互助需知
我知道了
×
提示
确定
请完成安全验证×
copy
已复制链接
快去分享给好友吧!
我知道了
右上角分享
点击右上角分享
0
联系我们:info@booksci.cn Book学术提供免费学术资源搜索服务,方便国内外学者检索中英文文献。致力于提供最便捷和优质的服务体验。 Copyright © 2023 布克学术 All rights reserved.
京ICP备2023020795号-1
ghs 京公网安备 11010802042870号
Book学术文献互助
Book学术文献互助群
群 号:481959085
Book学术官方微信