智能装配机器人视觉自主识别、高精度定位与柔顺控制方法研究

结题报告
项目介绍
AI项目解读

基本信息

  • 批准号:
    51875266
  • 项目类别:
    面上项目
  • 资助金额:
    60.0万
  • 负责人:
  • 依托单位:
  • 学科分类:
    E0510.制造系统与智能化
  • 结题年份:
    2022
  • 批准年份:
    2018
  • 项目状态:
    已结题
  • 起止时间:
    2019-01-01 至2022-12-31

项目摘要

To explore the intelligent assembly of electronic components in complex scene of assembly station units, thus the autonomous identification, high-precision positioning and compliance control of electronic components can be implemented in the assembly process. Firstly, this project discusses the essential characteristic of complex scene of assembly station, focuses on the cross-level association relationship discovery method from attributes and objects to scene, studies the hierarchical expression method of complex scene understanding maps, and constructs a knowledge guidance and feature matching oriented self-identifying model of electronic components assembling to realize the automatic identification of electronic components. Secondly, this project discusses the uncertainties, high nonlinearity, strong coupling and complexity of the control system, focuses on the thousandth precise positioning for the electronic components, studies the posture and applicability precise positioning method based on robotic vision, and constructs a multi-degree-of-freedom rigid-flexible coupling model to achieve high-precision positioning of electronic components. Thirdly, this project discusses the stress-strain nonlinear constitutive relationship of compliance robotic end effector, focuses on the quantification of variable stiffness compliant control uncertainties, and studies the adaptive adjustment mechanisms and self-learning assembly mechanisms for on-line robot assembly control to achieve a robotic visual oriented robot compliance control. The research results have important theoretical value for robot intelligent assembly of electronic components.
本项目拟探索复杂场景装配工位单元群的电子元器件智能装配问题,实现装配过程中对元器件的自主识别、高精度定位与柔顺控制。首先考察装配工位复杂场景的本质特性,研究从属性以及对象到场景的跨层次关联关系发现方法,并研究复杂场景理解图的层次化表达方法,构建面向复杂场景理解的电子元器件自主识别模型,实现电子元器件的自主识别;其次,考察控制系统的不确定性、高度非线性、强耦合性和复杂性,研究千分位电子元器件位置精确定位方法,并研究基于机器人视觉的位姿与位态精确定位方法,构建机器人多自由度刚柔耦合模型,实现电子元器件的高精度定位;再次,考察机器人变刚度柔顺末端执行器应力-应变非线性本构关系,研究变刚度柔顺控制不确定性量化方法,构建机器人在线装配控制的自适应调整机制与自学习装配机制,实现视觉导向的机器人柔顺控制。项目的研究成果对电子元器件机器人智能装配具有重要的理论价值。

结项摘要

面向装配工位单元群电子元器件智能装配移动机器人是具备人机协调、自然交互、自主学习功能的精密装配机器人的代表之一。本项目探索复杂场景装配工位单元群的电子元器件智能装配问题,主要研究复杂场景机器人视觉电子元器件对象的自主识别、强耦合机器人视觉控制的电子元器件对象高精度定位、电子元器件机器人视觉导向的变刚度柔顺控制。.  重要结果与关键数据:1)提出了基于机器视觉的电子元器件属性与类别的空间关系发现方法,依据方法所得到的电子元器件的属性、隐属性,构建了与其在圆周方向上邻近元器件的空间关系。2)构建了场景理解图目标检测模型,设计了神经架构搜索和深度可分离卷积轻量化主干网,提高了网络训练速度和参数效率,并显著提升了检测准确率,mAP达到了98.83%。3)提出了基于知识图谱的电阻色环检测及判读方法,实现了机器人视觉识别复杂场景理解。4)构建了面向知识引导和特征匹配的装配电子元器件自主识别模型,解决了装配电子元器件之间、电子元器件与背景混叠复杂工作场景之间的电子元器件对象自主识别问题。5)提出了基于数字微镜的PCB千分位电子元器件位置精确定位方法,获取电子元器件插装圆孔坐标。6)构建了机器人多自由度刚柔耦合位姿误差预测模型和固有频率预测模型,解决了刚柔耦合位姿误差建模问题。7)构建了电子元器件位置、位姿、位态的快速、准确三维重建方法,实现了PCB点云三维重建,配准结果低于0.01mm,达到了千分位精度。8)构建了视觉引导的FPC机器人装配变刚度柔顺控制模型,实现了柔性电路板FPC的插装。9)提出了格值模糊粗糙集不确定性量化方法,构建了变刚度不确定柔顺控制应力-应变非线性本构关系模型,定量刻画电子元器件装配柔顺对准的不确定性。10)构建了面向机器人电子元器件装配的自学习预测控制模型,实现了电子元器件机器人视觉导向的变刚度柔顺控制。.  项目的研究成果对电子元器件机器人智能装配具有重要的理论价值。

项目成果

期刊论文数量(20)
专著数量(0)
科研奖励数量(0)
会议论文数量(1)
专利数量(14)
Research progress of zero-shot learning
零样本学习研究进展
  • DOI:
    10.1007/s10489-020-02075-7
  • 发表时间:
    2020
  • 期刊:
    Applied Intelligence
  • 影响因子:
    5.3
  • 作者:
    Xiaohong Sun;Jinan Gu;Hongying Sun
  • 通讯作者:
    Hongying Sun
Instance Segmentation Method Based on Improved Mask R-CNN for the Stacked Electronic Components
基于改进Mask R-CNN的堆叠电子元件实例分割方法
  • DOI:
    10.3390/electronics9060886
  • 发表时间:
    2020
  • 期刊:
    electronics
  • 影响因子:
    2.9
  • 作者:
    Zhixian Yang;Ruixia Dong;Hao Xu;Jinan Gu
  • 通讯作者:
    Jinan Gu
Balanced-YOLOv3: Addressing the Imbalance Problem of Object Detection in PCB Assembly Scene
Balanced-YOLOv3:解决PCB组装场景中物体检测不平衡问题
  • DOI:
    10.3390/electronics11081183
  • 发表时间:
    2022
  • 期刊:
    electronics
  • 影响因子:
    2.9
  • 作者:
    Jing Li;Yingqian Chen;Weiye Li;Jinan Gu
  • 通讯作者:
    Jinan Gu
A Rapid Recognition Method for Electronic Components Based on the Improved YOLO-V3 Network
一种基于改进YOLO-V3网络的电子元件快速识别方法
  • DOI:
    10.1038/s41467-022-32763-6
  • 发表时间:
    2022-08-26
  • 期刊:
    electronics
  • 影响因子:
    2.9
  • 作者:
    Rui Huang;Jinan Gu;Xiaohong Sun;Yongtao Hou;Saad Uddin
  • 通讯作者:
    Saad Uddin
Eigen Solution of Neural Networks and Its Application in Prediction and Analysis of Controller Parameters of Grinding Robot in Complex Environments
神经网络特征解及其在复杂环境磨削机器人控制器参数预测分析中的应用
  • DOI:
    10.1155/2019/5296123
  • 发表时间:
    2019
  • 期刊:
    Complexity
  • 影响因子:
    2.3
  • 作者:
    Shixi Tang;Jinan Gu;Keming Tang;Wei Ding;Zhengyang Shang
  • 通讯作者:
    Zhengyang Shang

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi || "--"}}
  • 发表时间:
    {{ item.publish_year || "--" }}
  • 期刊:
    {{ item.journal_name }}
  • 影响因子:
    {{ item.factor || "--"}}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.authors }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.authors }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.authors }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.authors }}

数据更新时间:{{ patent.updateTime }}

其他文献

缺水条件下植物细胞力学模型研究
  • DOI:
    --
  • 发表时间:
    2011
  • 期刊:
    农业机械学报
  • 影响因子:
    --
  • 作者:
    李青林;毛罕平;李萍萍;顾寄南
  • 通讯作者:
    顾寄南

其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi || "--" }}
  • 发表时间:
    {{ item.publish_year || "--"}}
  • 期刊:
    {{ item.journal_name }}
  • 影响因子:
    {{ item.factor || "--" }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}
empty
内容获取失败,请点击重试
重试联系客服
title开始分析
查看分析示例
此项目为已结题,我已根据课题信息分析并撰写以下内容,帮您拓宽课题思路:

AI项目思路

AI技术路线图

顾寄南的其他基金

基于场景理解和视觉推理的光电集成芯片表面缺陷检测方法研究
  • 批准号:
    52375499
  • 批准年份:
    2023
  • 资助金额:
    50 万元
  • 项目类别:
    面上项目

相似国自然基金

{{ item.name }}
  • 批准号:
    {{ item.ratify_no }}
  • 批准年份:
    {{ item.approval_year }}
  • 资助金额:
    {{ item.support_num }}
  • 项目类别:
    {{ item.project_type }}

相似海外基金

{{ item.name }}
{{ item.translate_name }}
  • 批准号:
    {{ item.ratify_no }}
  • 财政年份:
    {{ item.approval_year }}
  • 资助金额:
    {{ item.support_num }}
  • 项目类别:
    {{ item.project_type }}
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了

AI项目解读示例

课题项目:调控A型流感病毒诱导IFN-β表达的机制研究

AI项目摘要:

本研究聚焦于TRIM2蛋白在A型流感病毒诱导的IFN-β表达中的调控机制。A型流感病毒是全球性健康问题,其感染可导致严重的呼吸道疾病。IFN-β作为关键的抗病毒因子,其表达水平对抗病毒防御至关重要。然而,TRIM2如何调控IFN-β的表达尚未明确。本研究假设TRIM2通过与病毒RNA或宿主因子相互作用,影响IFN-β的产生。我们将采用分子生物学、细胞生物学和免疫学方法,探索TRIM2与A型流感病毒诱导IFN-β表达的关系。预期结果将揭示TRIM2在抗病毒免疫反应中的作用,为开发新的抗病毒策略提供理论基础。该研究对理解宿主抗病毒机制具有重要科学意义,并可能对临床治疗流感病毒感染提供新的视角。

AI项目思路:

科学问题:TRIM2如何调控A型流感病毒诱导的IFN-β表达?
前期研究:已有研究表明TRIM2参与抗病毒反应,但其具体机制尚不明确。
研究创新点:本研究将深入探讨TRIM2在IFN-β表达中的直接作用机制。
技术路线:包括病毒学、分子生物学、细胞培养和免疫检测技术。
关键技术:TRIM2与病毒RNA的相互作用分析,IFN-β启动子活性检测。
实验模型:使用A型流感病毒感染的细胞模型进行研究。

AI技术路线图

        graph TD
          A[研究起始] --> B[文献回顾与假设提出]
          B --> C[实验设计与方法学准备]
          C --> D[A型流感病毒感染模型建立]
          D --> E[TRIM2与病毒RNA相互作用分析]
          E --> F[TRIM2对IFN-β启动子活性的影响]
          F --> G[IFN-β表达水平测定]
          G --> H[TRIM2功能丧失与获得研究]
          H --> I[数据收集与分析]
          I --> J[结果解释与科学验证]
          J --> K[研究结论与未来方向]
          K --> L[研究结束]
      
关闭
close
客服二维码