搜索
视觉感知技术视觉感知技术在智能汽车中的应用探讨东软集团股份有限公司刘威NeusoftCorporationNeusoftCorporation2014年10月26日此处填写密级标识目录目录•一、对智能汽车的理解•二、东软在智能车环境感知方面的探索•三、东软未来在智能车方向的构想此处填写密级标识一对智能汽车的理解.对智能汽车的理解此处填写密级标识什么是智能？什是智能动物智能动物智能计算机智能人类智能此处填写密级标识智能的种类？智能的种类自我认知交流…计算逻辑演绎交流表达环境判别并行任务管理矛盾冲突解决此处填写密级标识什么是智能汽车？什是智能汽车空间数字逻辑智运动智能感知环境规划决策自我行动空间智能智能感知环境规划决策自我行动语言智能人际智能交流能力理解能力智能能力能力自我自我认知此处填写密级标识自我诊断认知智能汽车与自动驾驶的关系智能汽车与动驾驶的关系颠覆式后天增量式式智能×.0今天+明天智能3.0ADASintrapersonalintelligence…昨天电子2.0ABS…AutonomousIntelligenceinterpersonalintelligence前天机械1.0ESC…共同控制自我认知控制沟通交流控制此处填写密级标识共同控制授权控制沟通交流控制自动驾驶的产生原因动驾驶的产原因交通事故:全球每年120万人死；交通问题交通事故全球每年万人死；交通拥堵：每个大城市每年有数百万小时被浪费在交通拥堵上交通问题人口老龄化革命手段：自动驾驶人口老龄化NCAP五星车自动驾驶商业竞争NCAP，五星车此处填写密级标识自动驾驶汽车的发展阶段动驾驶汽车的发展段NHTSA等级SAE等级SAE名称SAE定义转向和加速/减速的执行驾驶环境的监视动态驾驶任务的反馈执行系统能力（驾驶工况）A执行视执行驶工况）00人类驾驶员（“人”）监视驾驶环境人人人无无自动化由人类驾驶员在任何时间完全控制各类动态驾驶任务即使有报警和干预系统无自动化任务，即使有报警和干预系统。11辅助驾驶根据驾驶环境信息，由一个驾驶辅助系统在特定驾驶工况下执行转向或加速/减速，同时驾驶员执行所有其余的各类动态驾驶任务。人+系统人人一些驾驶工况22部分自动化根据驾驶环境信息，由一个或多个驾驶辅助系统在特定驾驶工况下执行转向和加速/减速，同时驾驶员执行所有其余的各类动态驾驶任务。系统人人一些驾驶工况自动驾驶系统（“系统”）监视驾驶环境33自动驾驶系统（系统）监视驾驶环境系统系统人一些驾驶工况有条件的自动化由一个自动驾驶系统在特定驾驶工况下执行所有的动态驾驶任务，同时需要驾驶员在系统要求其介入时响应。44高度自动化由一个自动驾驶系统在特定驾驶工况下执行所有的动态驾驶任务，即使在要求驾驶员介入时不响应，也能继续执行。系统系统系统一些驾驶工况在所有人类驾驶员能管理的道路和环境工况下，所有驾驶此处填写密级标识5全自动化在所有人类驾驶员能管理的道路和环境工况下，由自动驾驶系统在任何时间内完全控制各类动态驾驶任务。系统系统系统所有驾驶工况智能汽车(自动驾驶汽车)的感知手段智能汽车(动驾驶汽车)的手段此处填写密级标识智能汽车(自动驾驶汽车)的感知手段智能汽车(动驾驶汽车)的手段此处填写密级标识智能汽车(自动驾驶汽车)的感知手段智能汽车(动驾驶汽车)的手段驾驶者感知：近期身份视线手势语音车内近期：身份、视线、手势、语音远期：情绪，人车交流，…车内感知感知车外知车感知周边环境感知：车辆、行人、障碍物、标志、标此处填写密级标识车辆、行人、障碍物、标志、标识、信号灯….视觉传感器的作用视觉传的作•张三？身份类•张三？•是人还是车？•指示引导信息类•引导•警告•禁止•禁止视线交互类•视线•手势•此处填写密级标识•…视觉感知面临的挑战？视觉的挑战•指示、禁止、警告类的图形/符号信息多达上百类•行人等交通参与者意图难以识别此处填写密级标识二、东软在智能车环二、东软在智能车环境感知方面的探索此处填写密级标识目录目录•2.1东软概要介绍•2.2东软汽车电子介绍•2.3东软在环境感知方面的一些工作此处填写密级标识21东软概要介绍2.1东软概要介绍此处填写密级标识NeusoftOverview•1991年，创立于东北大学，现有20000余名员工，中国最大的IT解决方案与服务供应商•在中国建立6个软件研发基地，8个区域总部，在40多个城市建立营销与服务网络•在大连、南海、成都和沈阳建立了3所东软信息学院和1所生物医学与信息工程学院•在美国、日本、欧洲、中东设有多家子公司此处填写密级标识NeusoftPark风景沈阳大连南海成都此处填写密级标识东软业务架构东软业务架构东软以软件技术为核心，通过软件与服务的结合，软件与制造的结合，技术与行业管理能力的结合提供行业解决方案和产品工程解决方案以技术与行业管理能力的结合，提供行业解决方案和产品工程解决方案以及相关软件产品、平台及服务产品工程解决方案行业解决方案服务产品工程解决方案行业解决方案软件产品平台合作伙伴产品此处填写密级标识22东软汽车电子2.2东软汽车电子概要介绍此处填写密级标识东软汽车电子简介东软汽车电子简介StartedautomotivenavigationsystemR&D.19911991444developmentbases:Shenyang,Dalian,Shanghai,Hamburg.2000+Staff.2,0002,000222nearshorecenters:USandRomania.Romania200+Germany200+ShenYang700+DaLian800+US20+Japan100+Shanghai50+此处填写密级标识东软汽车电子业务线东软汽车电务线娱乐安防远程救援通信安防导航&位置服务TSP其它呼叫中心互联网车间通信网络周边网络其它车辆互联网道路基础设施此处填写密级标识23东软在智能车环境2.3东软在智能车环境感知方面的一些工作东软ADASISO愿景：为人类的交通安全与便捷作出贡献使命：IT技术推动汽车电子产品持续创新ISOISO/TC204/WG14TechnologyofMulti-SensorDataFusionTechnologyofMulti-ObjectRecognitionFish-eyeCamera&UWBRadar/UltrasonicSensorOptical/NIRCamera&RadarFish-eyeCamera&UWBRadarFish-eyeCamera&UWBRadar/UltrasonicSensorTrafficSignVehicleRoadMarkingPedestrianObstacleTechnologyofMulti-CoreHighPerformanceComputingTechnologyofMulti-KnowledgeIntegrationSciencesMechanicalElectronicComputerEngineering此处填写密级标识基于智能视觉的辅助驾驶系统-支持与其它传感器的融合45m支持与其它传感器的融合泊车辅助横穿障碍物预警倒车横穿障碍物预警泊车辅助变道辅助盲点监测前方碰撞预警车道偏离预警增强导航自适应巡航定速后视增强导航后方车道偏离预警泊车辅助泊车辅助0m盲点监测车道偏离预警自适应巡航定速后方碰撞预警泊车辅助泊车辅助泊车辅助变道辅助后方车道偏离预警0m驾驶员监测泊车辅助横穿障碍物预警倒车横穿障碍物预警45m0m10m45m70m0m10m45m150m45m此处填写密级标识前方相机或与长距离雷达融合鱼眼相机或与超声波或短距离雷达融合后视相机或与中短距离雷达融合东软环境感知技术东软环境感知技术ObstacleDetectionObstacleDetectionStillVehiclemovingpersonStillVehicleMovingobstacleStillVehicle,movingpersonStillVehicle,MovingobstacleMovingVehicle,movingpersonMovingVehicle,stillobstacle此处填写密级标识ObstacleDetection–sidecameraObstacleDetectionsidecamera此处填写密级标识PedestrianDetection此处填写密级标识VehicleDetection此处填写密级标识LaneMarkingDetectiong此处填写密级标识RoadMarkingRecognitionggUrbanRoadPoorlightconditionJoltingMultipleobjectandscraped此处填写密级标识DamagedMultiplelanesTrafficSignRecognitiongg此处填写密级标识Speedlimitsignrecognitionpgg此处填写密级标识Trafficlightrecognitiongg此处填写密级标识FaceDetection此处填写密级标识GestureRecognitiong静态手势动态手势轨迹手势手型手势手型+轨迹手势确定，返回，快捷操作等命令基于这些手势我们可以定制不同的命令集合。切换,增加，减少，唤醒等命令放大，缩小，确定，返回等命令确定点击调整大小却换等命令此处填写密级标识确定，点击，调整大小，却换等命令东软环境感知产品东软环境感知产品东软智能行车安全系统此处填写密级标识东软智能行车安全系统（之一：后视系统）此处填写密级标识东软智能行车安全系统（之一：后视系统）此处填写密级标识东软智能行车安全系统（之二：前视系统）此处填写密级标识东软智能行车安全系统（之二：前视系统）此处填写密级标识东软智能行车安全系统（之三：前后视一体系统）场景功能通用行车记录车道偏离预警前方碰撞预警前行盲区检测/变线支持泊车辅助倒车泊车辅助倒车碰撞预警此处填写密级标识三、东软未来在智能三、东软未来在智能车方向的构想此处填写密级标识东软智能汽车发展路线图Assisted（~2016）PartlyAutomatedHighlyAutomatedFullautomated（2017~2025）东软智能汽车发展路线图（2015~2018）（2015~2020）LowspeedParkingassistAEB(city)APTrafficjamassistMidspeedFCWLDWLCAAEB(interurban)MidspeedFCW,LDW,LCA,TSR,PP,TLD,ANAEB(interurban)AEB(Pedestrian)HighspeedFCW,LDW,LCA,TSR,PP,TLD,LKAAN此处填写密级标识Camera/GPSCamera/Laser/radarultrasonicCamera/Laser/radarultrasonic东软的合作机会东软的合作机会人•驾驶员个性/行为分析•智能车视觉环境感知车•智能车视觉环境感知路•交通信息采集此处填写密级标识Copyright©2012byNeusoftCorporation.Allrightsreserved.此处填写密级标识ygyg