机器人视觉系统笔记

机器人视觉系统研究

杭电图书馆

科学出版社

总页数:202

唯一QQ:1825587919

唯一WX:ly1825587919

PS:由于阅读效率原因,仅记录关键点

第一章  绪论

第二章 全向视觉系统

1.多摄像机拼接全向视觉系统
  ringcam系统   五个摄像头
2.鱼眼镜头全向视觉系统
  短焦距,超广角镜头
3.折反射式全向视觉系统
  锥形,椭圆形,双曲线形,抛物线形
  水平等比镜面,水平距离成像一样
  垂直等比镜面,垂直距离成像一样
  角度等比镜面
  改进 由内到外 双曲,水平等比,垂直等比
  标定方法
    1.极坐标
    2.与模型无关的标定算法设计

第三章 颜色编码化目标识别

1.摄像机参数自动调节
  图像熵    
  自动调节算法,改变曝光时间和增益,取曝光时间等于增益
  同样可调节摄像机其他参数
2.视觉系统颜色分类
  RGB  645.16  526.32  444.44
    形成颜色立方体
  HSI. 将立方体中心对角线的灰度线的点到原点
    旋转,形成一个圆锥形的颜色空间
  YUV. 亮度分量Y和色度分量U.V组成通常用在彩色电视等一些传输协议中。通常用压缩的422模式
    相互转换  矩阵式
  颜色查找表  根据查找表直接得出颜色范围
  颜色空间选择原则
  yuv与hsi颜色空间混合使用
  基于线性分类器的颜色空间划分
  白线识别
  障碍物识别
  中心极坐标,,分为180份,检测黑色遮挡物

第四章  非颜色编码化目标识别

  解决任意颜色,纹理的足球识别问题
  1.全向视觉成像模型的任意足球识别
  2.基于AdaBoost学习算法的任意足球识别
    模式识别最常用算法

第五章  目标跟踪与状态估计

  单目标跟踪
  足球机器人的运动特点
    自主运行,有一定目的性
  目标运动模型

  •     静止模型
  •     匀速与匀加速运动模型
  •     时间相关模型
  •     当前统计模型

  滤波器约束条件
    普通kalman滤波算法不太理想,将普通滤波改进,增加约束条件
    对速度,加速度约束,
    引入约束条件的方法,最有效:滚动时域估计 mhe

  基于联合概率数据关联的多目标跟踪
  椭球跟踪门规则

  基于ransac和卡尔曼滤波的目标状态估计
  基于双目视觉的三维空间目标状态估计
    双目视觉系统  增加一个双目摄像头
  软件方面主要有三个并行线程

    • 1.采集摄像机左右两幅图像并做畸变矫正
    • 2.对两幅图像分别进行足球识别,足球三维坐标重构
    • 3.运动轨迹拟合,落点位置预测

  足球识别与定位  颜色查找表
  足球运动轨迹的拟合  采用最小二乘法进行抛物线轨迹拟合
  足球运动落点位置的预测
  机器人运动决策

第六章  足球机器人视觉自定位

  粒子滤波定位
  匹配优化定位
  二者结合得到自定位方法
  有效解决绑架后自定位,

v、

原文地址:https://www.cnblogs.com/tenjl-exv/p/8401477.html

时间: 2024-08-11 13:47:58

机器人视觉系统笔记的相关文章

机器人视觉测量与控制

机器人视觉的基本概念 1.摄像机标定(Camera Calibration):对摄像机的内部参数.外部参数进行求取的过程. 2.视觉系统标定(Vision System Calibration):对摄像机和机器人之间关系的确定. 3.手眼系统(Hand-Eye System):又摄像机和机械手构成的机器人视觉系统. 4.Eye-in-Hand:摄像机安装在机械手末端并随机械手一起运动的视觉系统. 5.Eye-to-Hand:摄像机不安装在机械手末端,不随机械手运动的视觉系统. 6.视觉测量(Vi

机器人学 —— 机器人视觉(特征)

上回说到机器人视觉的核心任务是estimation,理论框架是射影几何理论.在之前的作业中展现了单应变换的巨大威力.然而,整个estimation 的首要条件是已知像素点坐标,尤其是多幅图中对应点的像素坐标. 单幅图像的处理方法都是大路货了,不赘述.这篇博客想讲讲不变点检测与不变特征.由于机器人在不断运动,所以可能从不同方向对同一物体进行拍摄.而拍摄的距离有远近,角度有titled. 由于射影变换本身的性质,无法保证两幅图中的物体看上去一样.所以我们需要一种特征提取方法(特征点检测),能够保证检

机器人视觉跟踪与控制研究(一)

研究背景: 机器人视觉,通过图像获得外界信息,用于机器人对环境的感知. 提高机器人智能性.环境适应性.自主行为的重要途径. 近年来机器人领域的研究热点之一. 研究内容: 视觉系统标定 目标分割与图像处理 视觉测量与视觉控制 视觉系统标定 1基于环境信息的自标定 ?利用环境中的正交平行线获得消失点,标定摄像机的内参数 ?利用环境中的正交平行线确定摄像机的姿态 ?提出了利用正交平行线可靠标定摄像机内参数的必要条件 2基于相对运动的自标定 利用机器人末端的至少两次平移运动,标定出立体视觉系统的参数 3

机器人学 —— 机器人视觉(估计)

之前说到,机器人视觉的核心是Estimation.求取特征并配准,也是为了Estimation做准备.一旦配准完成,我们就可以从图像中估计机器人的位置,姿态.有了位置,姿态,我们可以把三维重建的东西进行拼接.从视觉信息估计机器人位姿的问题可以分为三个大类:1.场景点在同一平面上.2.场景点在三维空间中.3.两幅点云的配准. 所有问题有一个大前提就是知道相机内部矩阵K. 1.由单应矩阵进行位姿估计 单应矩阵原指从 R2--R2 的映射关系.但在估计问题中,如果我们能获得这种映射关系,就可以恢复从世

机器人学 —— 机器人视觉(基础)

机器人视觉是一种处理问题的研究手段.经过长时间的发展,机器人视觉在定位,识别,检测等多个方面发展出来各种方法.其以常见的相机作为工具,以图像作为处理媒介,获取环境信息. 1.相机模型 相机是机器人视觉的主要武器,也是机器人视觉和环境进行通信的媒介.相机的数学模型为小孔模型,其核心在于相似三角形的求解.其中有三个值得关注的地方: 1.1 1/f = 1/a + 1/b 焦距等于物距加上像距.此为成像定理,满足此条件时才能成清晰的像. 1.2 X  = x * f/Z 如果连续改变焦距f ,并同时移

机器人学 —— 机器人视觉(Bundle Adjustment)

今天完成了机器人视觉的所有课程以及作业,确实是受益匪浅啊! 最后一个话题是Bundle Adjustment. 机器人视觉学中,最顶尖的方法. 1.基于非线性优化的相机位姿估计 之前已经在拟合一篇中,已经补完了非线性最小二乘拟合问题.Bundle Adjustment,中文是光束平差法,就是利用非线性最小二乘法来求取相机位姿,三维点坐标.在仅给定相机内部矩阵的条件下,对四周物体进行高精度重建.Bundle Adjustment的优化目标依旧是最小重复投影误差. 与利用non-linear mea

小波变换与人类视觉系统 [转自飞鸟的博客]

视觉系统的空间和频率特性是相互依赖的,对于运动图像,存在一种时间分辨率和空间分辨率的交换.实际上,生活中也有这种经验,当快速运动物体从眼前通过时,很难看清其细节,只能看见粗略的轮廓.只有当物体细节大小.细节明暗对比度以及在眼中呈现时间长短都合适时,才能对物体细节有较清楚的感知.对人眼的空间一频率响应曲线的测试表明,当空间频率较高时,空间对比度敏感性下降,也即人眼对快运动物体的细节分辨力低.同样,空间分辨率较高时,人眼对闪烁的敏感度下降,实际上,人眼对运动物体的分辨能力和人眼能不能“跟踪”有关.如

实时视觉系统

一直在想着实现一个数据可视化系统,用于能谱数据,信号,图像处理,以及图像重建,融合,分离.可是时间过去了这么久一直没有做出第一步,今天去阅读了阵列探测器信号优化,忙信号处理,自适应阵列信号处理. 甚至有时在想我的目的是什么,一直想的是实时视觉处理,在视觉处理拼的是仔细,时间成本的投入的年代,而原创性 早已少有的时候,我觉得自己这样选择本没错. 写好了拷贝过来.. 实时视觉系统

机器视觉(4)——视觉系统基本组成

从视觉软件进入机器视觉行业,有必要全局认识一下机器视觉系统组成. 图 1 典型的机器视觉系统可以分为:图像采集部分.图像处理部分和运动控制部分.基于PC的视觉系统具体由如图1所示的几部分组成: ①工业相机与工业镜头——这部分属于成像器件,通常的视觉系统都是由一套或者多套这样的成像系统组成,如果有多路相机,可能由图像卡切换来获取图像数据,也可能由同步控制同时获取多相机通道的数据.根据应用的需要相机可能是输出标准的单色视频(RS-170/CCIR).复合信号(Y/C).RGB信号,也可能是非标准的逐