人类是今朝地球上伶俐水平最高的生物,
眼睛可以说是大脑最风雅的部件。
“而我们这些年来,
一向处置的研讨
便是仿造眼睛这个部件
——仿生眼。”
中国科学院上海微体系取信息技术研究所(以下简称中科院上海微体系所)仿生视觉体系实验室主任李嘉茂研究员向上海高新科技默示。
“中科院上海微体系所团队的仿生眼便是摹仿人类的视觉体系和视觉信息正在脑内的处置机制,付与机器人以人的视觉。”
仿生视觉团队研制的立体显微镜打破可见光显微重修手艺,取得了媲美日本某品牌激光共聚焦显微镜的精度,边沿处细节精度优于其商用显微镜,功效宣布IEEE丈量范畴旗舰刊物TIM。
高精度可见光立体显微体系
仿生视觉团队研制了大标准齐范畴可见-红外光交融感知仿生鹰眼,正在西藏完成了雪山冰川丈量的可行性考证。
基于仿生鹰眼的雪山冰川丈量考证
根据双目标视差来规复场景的三维信息
李嘉茂先容,今朝中科院上海微体系所的仿生视觉体系可以实现所有的人类眼球活动,实现双眼调和活动、光滑追踪、视点切换、活动含糊抑止的功效,实现比传统双目视觉加倍牢靠的机械视觉体系。
“单个相机收集的信息是二维的,
与人的视觉信息处理一样,
中科院上海微体系所能够经由过程双目标视差
来规复场景的三维信息。”
中科院上海微体系所实现了许多脑区皮层的算法,触及空间信息感知、活动信息感知、语义信息感知,空间信息感知包罗深度估量、视觉定位、三维重建,活动信息感知包罗光流估量、活动支解、方针跟踪,语义信息感知包罗图象分类、方针检验、语义支解。还能够像人脑那样多个脑区联动来实现视觉的团结使命,好比语义SLAM、实时立体场景图等等。
搭载跨脑区算法的自立探索移动机器人
特别是在上海市“脑取类脑智能底子转化应用研究”市级高新科技严重专项的支持下,研制了面向智能机器人的多模态传感、认知、阐明和决议闭环的智能体系,机器人能够实现庞大场景的手眼协同抓取、面向未知环境的机器人自立探索和环境重修。
搭载仿生双眼、具有视听交融感知交互才能及决议履行节制功用的“机械脑筋”实现手眼协同抓取
基于研究所仿生视觉团队自立可控的仿生双眼技能,研制面向视听多模态交融处置惩罚场景的移动机器人专用国产SoC芯片。
李嘉茂引见,该芯片可在智能机器人体系中实现齐脑的功用。
个中,BISP模块类似于脑干能够实现机器人的多种感官同步和时序校准功效,CVPE模块能够完成机器人高精度视觉导航和深度算法的加快,Bino神经加快单位能够经过软件界说实现硬件的灵敏设置,支撑多种神经网络中的特定加快算子,实现模仿人脑处置的视听觉团结义务中的脑区功效。该芯片能够提拔机器人端侧的感知、剖析、决议计划的智能程度。
“我国语音麦克风阵列和
图象双目视觉等焦点算法
均国际领先水平,
将来我国有望继承坚持
正在视听觉交融范畴的算法抢先。”
李嘉茂说。
端用芯片可有用支撑在智能硬件终端上举行多通道、高通量数据的实时庞杂处置惩罚,实现“端”和“云”高效协同。
“端用芯片是庞杂算法落地枢纽途径,
也是护卫软功效的次要体式格局。”
仿生眼范畴的科研打破将若何为家当赋能?
将会推进哪些推翻式变革?
中科院上海微体系所偏重办理国度相干严重工业傍边的环节性问题。中科院上海微体系所面向半导体行业的上下游,研讨了一系列机器人。
“半导体的出产车间全是无尘的,
并且工序取工序之间的物料须要搬运,
有些环节因为物理空间限定,
天车还没有方法完整笼罩,
只会人力往搬运。”
然则,其实在半导体出产的无尘车间里,
人其实是最大的一个污染源。
怎么办?
李嘉茂对这一些运用场景进行了深入掌握。
正在智能制作机器人行业,中科院上海微体系所设计的面向半导体柔性出产的自立搬运机器人,能够很好的处理这个题目,根据实现24小时的正在线高效搬运,可大大进步全部自动化出产的运转效力,取代人工正在无尘车间天车没法掩盖的地区举行搬运,为企业低落无尘车间的污染进步产线的良品率,进步功课的安全性和效力供应了协助。
晶圆搬运机器人
传统机器人基本是根据预编程大概固定在某一位置上实现某一特定义务,中科院上海微体系所研发的机器人功用是集信息传感、认知取剖析决议计划一体的。
“所以面向柔性出产需求,基于我们研发的视觉体系能够异常方便地改动原有功课计划。”李嘉茂说。
中科院上海微体系所的仿生视觉体系模拟人眼但逾越人眼。立体显微体系能够实现近似于激光共聚焦显微镜的精度,正在渺小裂纹检验、瑕疵检验等场景上获得了很好的结果;大标准仿生双眼体系实现了冰川、生态的实时三维静态检验,正在伶俐都会、伶俐安防、伶俐生态层面取得了打破。
中科院上海微体系所的仿生双眼交融可见光、红外、紫外能够实现庞杂工况的检验,中科院上海微体系所取申通地铁站协作研制的轨道交通平安数字孪生体系能够实时检验地铁站运转时代的弓网平安、轨行区障碍物等,为地铁站的平安运转和保护给予智能保障。
轨道交通数字孪生体系
“作为中国科学院研讨团队,
我们是‘国家队’,
实验室终极面向的
是仿生智能视觉感知技能的运用落地,
因而研讨机器人感知的基础上,
还致力于他们的行业运用。”
让更多青年人科技工作者站上科研舞台
人才,是高新科技立异的源动力。
近年来,国度高度重视人才事情,正在科研人员“减负”层面推出了系列有效果的鼎新办法,方才又推出了展开减轻青年人科研人员压力专项举措,惠及了我们科研活动中的多个环节。
8月8日,科技部等五部分发文,正式开启减负行为3.0。这一次减负的主体聚焦于青年人科研人员,给予更多的撑持,扛大梁、增机遇、减审核、保时候、强身心多项办法为青年人科技工作者给予很好的成长环境。
“像我们实验室便是一个35岁以下青年人高新科技工作者占比很大的团队,正在实验室项目攻关过程中,有很多青年人科研人员冲正在前面,敢接受、能作为,信任正在减负新举措的引领下,能缔造更好的舞台让他们专心攻关,激起立异潜能与生机,为国度高新科技自力自强做出更多奉献。”李嘉茂表现。