[108]计算机视觉的图像基础

背景

本文档为计算机机器学习相关笔记,探讨了计算机视觉的应用。

视觉应用分类

应用分类具体有两种:

  1. 语义感知
    语义感知有:分类(一幅图中猫、狗划分出来)、检测(检测人脸、行人)Detection、识别-Recognition(识别出运动或静止中人)、检索-Retrieval(看相似度有多高,以图搜索图,比如搜狗图片搜索)、分割(?)
  2. 几何属性(什么是几何属性?)
    3D建模、双目视觉、增强现实

颜色空间

颜色空间有RGB和HSV

  1. RGB空间:
    RGB以red green blue,3种颜色组合成的颜色空间。
  2. HSV/HSL(I)空间:
    3通道为: H/Hue通道(颜色种类),Saturation(颜色浓淡)、value(颜色明亮度)、Lightness(I/Intensity)(亮度、光照亮度)
    在两个空间中都可以表示一个像素的颜色值,在RGB空间终究是(b,g,r),在hsv空间中表示为(h,s,v/l/i),请看如下图:


    image.png

亮度适应和鉴别(人眼是有误判)

下图中中间一小块的亮度是一样的,但是人眼由于有周围背景的对比,我们会感觉3个小图的亮度是不一样的。(这方面机器检测比人眼强多了)


image.png

图像的取样和量化

我们知道电脑中的图片都是以数字的形式存放,那么这个数字图片是如何生成的呢?
数字图像的生成包括取样和量化,下面图描述了一幅图如何从模拟信号转换为数字信号及其取样和量化的过程。


image.png

计算机都是通过0,1离散的值来表示信息,同样图像表示中我们把图像分成一个一个像素,像素越大精度越大。如下图,图像被分割成很多像素,每个像素有一个灰度值。右边小图由于像素精度太低所以出现马赛克的式样,如果像素越来越大越能够平滑真实的表示图像信息。


图像像素描述

实际过程中我们有均匀采用和非均匀采用,非均匀采样就是图片不同区域采样的精度不一样,比如电影夜晚画面,依据注意力引导机制,对人就高精度采样,背景就低精度采样。

图像在电脑中就是以矩阵形式存储,坐标可以有多种(直角的、矩阵的、像素的),矩阵里面的值可以是灰度值/RGB值。
坐标的精度就是空间分辨率,坐标里的一格表示物理图像中尺寸多大即采样间隔值,用3维坐标来说就是X,Y坐标的采样间隔值。
而灰度分辨率就是竖坐标H的精度,如果 A(Xa,ya)区域 的灰度值为4.56,B(Xb,yb)区域 的灰度值为4.57,此时如果H轴的分辨率如果是0.01,那么A,B区域灰度值就区分开来了;如果H轴分辨率是0.1那么A,B区域的H轴值一样,这样图片表示不细腻。当H轴分辨率低到一定程度会出现断层,无中生有的轮廓。

像素内的值如何填充

我们知道一个像素是一个小方块且这一小方块的值是一样的,更细节的观察这个小方块 有4个顶点。那么这个小方块的值该取哪个顶点的值呢,还是4个顶点平均一下。
关于像素内值如何取的问题我们叫做图像内插值,最常见的插值方法有:
1).最近领域
2).双线性差值
3).双3次插值 (又叫双立方插值,具体参考:https://baike.baidu.com/item/%E5%8F%8C%E4%B8%89%E6%AC%A1%E6%8F%92%E5%80%BC

image.png

图像放大

假设我们分辨率不变,如果图像放大那么屏幕上展示的图像放大。意味着图像覆盖的像素点变大的,但由于是放大操作所以是机遇存储在电脑中以后像素进行放大。那么放大后的各像素如何填充呢?
具体见如下图所示:


放大图像像素填充

图像的运算

图像在计算机中是以矩阵形式存储的,我们对图像进行点对点的加减乘除计算,每个运算都有其各自的场景和特点。
1.加法:去除“叠加性”噪音,g(m,n)= af(m,n) + bh(m,n)
2.减法:检测两幅图像之间的变化,比如监控器中查看任务运动轨迹。

  1. 乘法:图像局部显示,比如用二值蒙板图像与原图像做乘法,利用类似0*任何数=0 特性。

其他一些概念及疑问

1).置信度:https://baike.baidu.com/item/%E7%BD%AE%E4%BF%A1%E5%BA%A6 这个需要查看概率论的书。
2).图像减法可以得出固定背景下某个运动物体的轨迹,那么如果背景也是动的情况如何处理呢?

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,185评论 6 503
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,652评论 3 393
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,524评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,339评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,387评论 6 391
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,287评论 1 301
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,130评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,985评论 0 275
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,420评论 1 313
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,617评论 3 334
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,779评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,477评论 5 345
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,088评论 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,716评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,857评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,876评论 2 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,700评论 2 354

推荐阅读更多精彩内容