【CV论文笔记】Mask R-CNN之RoIAlign理解

【CV论文笔记】Mask R-CNN之RoIAlign理解,第1张

本文主要用于介绍Kaiming He, rbg等大神于2017年提出的Mask R-CNN网络,该网络架构是在其前作Fast R-CNN上的升级改进版可以用于实例分割。本笔记主要为自我温习回顾,以备后用。

论文链接: https://arxiv.org/pdf/1703.06870.pdf

github主页: https://github.com/facebookresearch/Detectron

rbg大神个人主页: http://www.rossgirshick.info/#girshick2014rcnn

恺明大神的演讲视频: https://www.youtube.com/watch?v=g7z4mkfRjI4&t=601s

为更好的理解该论文,建议先行阅读Faster R-CNN网络的相关论文,这里也附上本菇之前写的1篇论文笔记供大家参考~

Faster R-CNN理解

基本目录如下:

------------------第一菇 - 摘要------------------

我们从概念上提出了一种简单,易变和通用的框架用于目标实例分割。我们的方法能够高效的在一张图片中检测出物体同时对于该物体生成高质量的分割蒙版(segmentation mask),我们称此方法为,“Mask R-CNN”,其本质也是由Faster R-CNN衍化而来的,就是在Faster R-CNN后面多加了一个分支用于预测目标的蒙版,跟预测目标的识别和位置的分支是平行的。Mask R-CNN也易于去训练,仅仅只比Faster R-CNN慢一点,运行效率达到5fps。另外,Mask R-CNN也能够十分简单的被转移去训练其他的任务,比如去预测人体的姿态关键点。我们在COCO数据集上运用该模型训练了多个任务,包括实例分割,目标框预测和人体关键点检测,均取得不错的成绩。我们希望Mask R-CNN能够成为业界新的标杆,并能被广泛运用于新领域的研究。

------------------第二菇 - 核心思想------------------

整体架构十分容易理解,就是在RPN之后新添了一个分支用于预测mask的。网上其他的讲解资料也很多,这里我只记录一下Mask R-CNN中的重点,RoIAlign。不过我们还是先来温习一下,什么是RoIPool的实现原理。

为了搞明白原理,我们先问一个问题,为什么需要RoIPool?

原因就是经过RPN生成的候选区域大小不一样,无法直接连接全连接层进行后续的分类及定位处理,因此需要RoIPool层将其转为固定维度大小的特征。当然这是很明确的一个原因,不过还有一个潜在的原因可以理解为特征的二次提取。因为在RPN中,特征只被共享卷积层提取过一次,而为了提升后续的定位及分类准确率,对于每一个候选区域进一步提取特征也是符合逻辑的,贴一张示意图,方便理解,

原理很简单,我们再来看具体的细节处理,会产生的像素偏差。

第一个就是从输入图上的RoI到特征图上的RoI Feature,

假如现在我们输入了一张 的图像,图像中有2个目标(狗和猫),其中狗的识别框为 ,经过VGG16网络后,图像得到对应的feature map为 (5次池化 *** 作),而对应的狗的识别框就变为 了,因此这里就会有一个误差,于是这里就有了第一个量化 *** 作,即取整,使其结果变为 ,如下所示(右图中未能重叠的部分就是误差了~)

第二个误差就是将每个特征转化为固定大小维度的时候所产生的。比如现在要将 的特征映射到 上,对应的大小就是 了,因此同上这里又会有一个误差,于是就有了第二个量化 *** 作,也是取整。即原先由 大小生成的值,现在只由 的大小生成了~虽然看起来这是一个很小很小的误差,但是要知道,这时候我们的感受野已经是32倍了,相当于原图 的像素差了~

这里也贴一张网上流行的RoIPool的示意图,帮助理解,

因此以上两种取整的量化 *** 作,对于分类问题来说可能影响不大,但是对于实例分割这种像素级别的,细微的像素误差可能就会导致最终结果的崩坏。因此,本文才会提出了RoIAlign,其主要目的就是为了消除这种误差的。

简单来讲,RoIAlign的作用就是用双线性插值的办法取代了之前的取整 *** 作,从而使得每个RoI取得的特征能更好的对齐原图上的RoI区域。具体来讲,双线性插值是一种比较理想的图像缩放算法,他通过拟合一个虚拟的点(该点的值由其周围4个确定点的像素值决定),从而将那些浮点数的点的值给表达出来,如下图所示,

作者同时也强调了一件事情,即,

We note that the results are not sensitive to the exact sampling locations, or how many points are sampled, as long as no quantization is performed.

也就是说该方法对采样点的个数和位置并不是十分敏感在意的~而且采用了这种方法以后,准确率有了很大的提升~!

至此,整一个新的RoIAlign层的作用及原理算是讲明白了。

剩下的网络架构类的,实现细节等不再多记录了。

------------------第三菇 - 总结------------------

本文主要是记录了Mask R-CNN中的一个创新难点,ROIAlign的作用及实现方法,其他有关Mask R-CNN的相信不难理解。

参考文献:

【1】 https://blog.csdn.net/jiongnima/article/details/79094159

惠州市恒光机电工程有限公司是2009-09-01注册成立的有限责任公司(自然人投资或控股),注册地址位于惠州市仲恺高新区陈江街道办事处曙光大道大欣集团内(办公楼)一区6号4楼403室(仅限办公)。

惠州市恒光机电工程有限公司的统一社会信用代码/注册号是91441300694711658B,企业法人张学清,目前企业处于开业状态。

惠州市恒光机电工程有限公司的经营范围是:净化系统设计及安装,家用电器、制冷设备、机电设备安装维护,建筑装饰工程,水电安装工程,消防工程,环保工程,办公室自动化及计算机网络工程,销售:五金交电、工程机电设备及配件、电子产品及气动元器件、半导体及密封材料、抛光研磨材料、化工产品(不含化学危险品)、建筑材料、通讯器材、仪器仪表、照明电器、保温防腐材料、钢材、电线电缆、汽车摩托车配件及耗材、皮革制品,国内贸易,网上贸易代理,货物或技术进出口。(依法须经批准的项目,经相关部门批准后方可开展经营活动)。

通过爱企查查看惠州市恒光机电工程有限公司更多信息和资讯。

『壹』 广州轻工学校是怎样的

广州市轻工高级技工学校是国家级重点技工学校,2005年被批准成为技师学院和省高技能人才实训基地。目前是广州市劳动和社会保障局属下的六所高级技工学校和技师学院之一。自1958年建校至今近半个世纪以来办学的积累与沉淀,已使学校形成较强的办学实力、独具特色的办学风格和教育理念,为地区和行业的经济发展做出了突出贡献。 学校目前有南、北、东等校区:南校区位于滨江中路,北校区位于白云区钟落潭镇竹料管理区,东校区位于中山三路。全校占地面积达109,485平方米(164.2亩),建筑面积目前为111,648平方米。 学校拥有雄厚的师资队伍,教师队伍中具有高、中级技术职称的占60%以上,一体化(双师型)教师占专业教师96%以上。学校现有在校生九千五百多人,其中高级工班和技师班的学生占56%。学校建立起学历教育与职业培训并重,中、高级技工及技师教育相衔接,高级技工与大专教育相融通的职业教育体系;形成一个包括职业教育、培 训、技能鉴定、技术服务等多种功能为一体的教育实体。 学校开设以加工制造业专业为主的五大类共二十六个专业,而且全部专业都实现了中、高职的衔接,许多专业已形成本校的强项专业和特色专业,“机电一体化”专业被评为广州市技校的名专业。 学校坚持改革与创新,保持着不断开拓进取、永不满 足于现状、永不停滞前进脚步的优良传统,具有严格、精密、追求将工作做得最好的严谨科学态度与工作作风。学校建立起适应当前教学与人才培养规格要求的,硬件先进配套、软件适度超前的十一大教学系统;建立了ISO9001国际质量管理体系;建立了现代化的信息管理网络,校园网络完全覆盖四个校区,并自行开发了学校管理软件,基本实现了学校教学和管理的信息化、网络化。 学校长期依托行业办学,已形成与行业、企业紧密联系的传统和优势。更为可贵的是:由于多年来坚持严格的管理和保持良好的校风,使学校在社会上享有良好的声誉,历年招生形势非常好,毕业生的 就业单位覆盖了广州市和珠江三角洲的加工制造业和轻工行业,毕业生就业率超过98%。 学校多年来的办学业绩和教育质量,受到社会各界的广泛关注和各级领导、国内外同行的高度评价,已成为一所在省内乃至国内有一定知名度的职业技术学校。现已被确定要建设成为国家级示范性职业学校和广州市高技能人才培养培训基地。学校将继续发扬优良传统和作风,充分发挥北校区启用后的条件和优势,力争在“十一.五”期间,将我校提升为以培养高级技工以上职业资格的技能型人才为主,专业设置、教育教学质量和教学设施、师资队伍都达到国内一流水平的高级技工学院。 学校网址: //GZSLITS.COM.CN

『贰』 广州市轻工高级技工学校和广州轻工职业学校有什么分别

首先.我系广州市轻工高级技工学校,又名技师学院

其实讲到就业率,任何学校与实习单位一样,实习1年,你就会俾公司炒鱿鱼

定律,无办法.

轻工高级技工学校系国家办学校,相对会好,学费平

其他学校我唔系好清楚,高级技工学校中专学费,每学期500多(学费,没算书本费)

一共有3个校址一个大东门,最细间,其次海珠桥脚,大少少,,真系大小小甘多..最后就系竹料.起佐无几耐,,大概3年啦,,,占地面积大,不过你如果系广州人,应该唔会考虑

『叁』 广州轻工业职业学校专业代码是多少

如果是中考生考中专的话,学校名字是广州市轻工职业学校

如果的高考生考高职大专的话,学校名是广东轻工职业学院 学校国标代码:10833

『肆』 广州轻工学院好吗,有什么专业,环境咋样,贵么在广州有几个这样的轻工学院详细

广轻工有广州校区和佛山校区!学费不贵5500左右的!这个是公立学校。广轻工是广东省最好的大专了!分数经常逼近2A的院校

『伍』 广东省轻工职业技术学校和广州市轻工职业学校哪个好

最主要的还是

专业的确定,像大学一样,专业是非常重要的;其次

就是学校的选择。对于现今社会而言,专业可以去热门行业中去选择。另外,选择一所技术学校的

话,要根据学校的办学级别,再加上看学校的资质是否正规!设备是否完善!办学规模如何!办学

实力及师资力量情况如何等多方面进行实地考察

『陆』 广州轻工技术学校有什么专业

有很多啊~!

机电

数控

酒馆

计算机应用和网络!

『柒』 广州市轻工职业学校

广州市轻工职业学校,是广州市教育局直属的唯一一所以先进制造业专业为主的国家级重点职业学校。目前学校为适应广州市经济发展设置上正向技术支持、设备维护与维修等服务类专业拓展,是广东省教育厅批准的与广东轻工职业技术学院、广州铁路职业技术学院和广东省水利电力职业技术学院等高职院校实行三二分段对口自主招收大专生的试点学校,是与广州市广播电视大学联合办学培养大专生、本科生的学校,并设有经广州市劳动和社会保障局批准的职业技能鉴定所。

学校位于广东省广州市天河区长福路173号,学校创办于1958年,学校现有校园面积73.2亩,校舍建筑面积5万多平方米,分为校本部和赤岗校区两部分。现有在校学生5300人,教职工250多人,专任教师全部具有本科以上学历。曾先后被评为“广东省重点中职学校”和“国家级重点中职学校”。

『捌』 广州市轻工职业学校今年有哪些专业招生

广州市轻工职业学校2015年广东省省内文理类招生计划

专业代号

专业名称

理科

文科

合计

费用(元/年)

备注

010

机电一体化技术

250

250

学费:6000;住宿费:1300

①精细化学品生产技术、食品加工技术、环境监测与治理技术专业与仲恺农业工程学院开展三二分段专升本应用型人才培养试点项目。完成三年高职学段学习后各项考核合格,并符合相关条件和要求的,获得我校普通高职毕业z书。通过转段选拔考核的学生分别进入仲恺农业工程学院化学工程与工艺专业、食品科学与工程专业、环境工程专业学习两年,符合相关条件和要求的,可获得仲恺农业工程学院普通本科毕业z书和学位证书。

②文史、财经、管理、外语类学生三年都在南海校区就读;理工类学生一、二年级安排在南海校区就读,三年级在广州校区就读。

011

机械制造与自动化

75

75

012

数控技术

50

50

013

模具设计与制造

80

80

014

电气自动化技术

130

130

015

汽车技术服务与营销

85

35

120

016

汽车运用技术

35

35

017

汽车制造与装配技术

75

75

018

制冷与空调技术

50

50

019

高分子材料加工技术

35

35

020

精细化学品生产技术 (与仲恺农业工程学院三二分段培养)

100

100

021

化妆品营销与使用技术

50

70

120

022

商检技术

60

60

023

材料成型与控制技术

50

50

024

出版与发行

30

30

60

025

包装技术与设计

50

50

100

026

印刷图文信息处理

30

30

60

027

食品加工技术 (与仲恺农业工程学院三二分段培养)

100

100

028

食品营养与检测

100

100

029

生物技术及应用

60

60

030

生物化工工艺

50

50

031

生物制药技术

50

50

032

药品经营与管理

50

50

033

软件技术

82

82

034

计算机信息管理

50

50

035

计算机应用技术

30

30

036

计算机网络技术

85

85

037

应用电子技术

90

90

038

半导体照明技术与应用

60

60

039

通信技术

50

50

040

通信工程监理

40

20

60

041

移动通信技术

90

90

042

楼宇智能化工程技术

50

50

043

建筑装饰材料及检测

50

50

044

环境监测与治理技术 (与仲恺农业工程学院三二分段培养)

100

100

045

园林工程技术

50

50

046

电子商务

30

85

115

学费:5000;住宿费:1300

047

市场营销

25

95

120

048

物流管理

25

50

75

049

文秘

15

65

80

050

社区管理与服务

20

30

50

051

酒店管理

20

60

80

052

旅游管理

10

75

85

053

会展策划与管理

20

70

90

054

涉外旅游

5

45

50

055

商务英语

40

110

150

学费:6000;住宿费:1300

056

商务日语

20

55

75

057

应用英语

40

120

160

058

应用德语

5

25

30

059

会计电算化

45

110

155

学费:5000;住宿费:1300

060

财务管理

20

55

75

061

国际经济与贸易

10

60

70

062

经济信息管理

10

25

35

063

证券与期货

10

30

40

064

房地产经营与估价

15

66

81

合计(人)

2857

1466

4323

『玖』 广州市轻工高级技工学校(北校区)

校服:就读中职部,校服为白色跟绿色,就读高职部,校服为白色跟黑色。冬装两套,夏装两套,可自买夏装短裤,如果专业需要实 *** ,就要买工作服,一件长袖,一件短袖。中职部校服为棉料,容易脏,难洗干净。高职部。冬装是类似风衣的,不保暖。夏装衣服容易起毛。

头发:校规上男生要剪短男生跟女生都不能染,不能烫。

路线:学校地址:广州市白云区竹料镇东凤南路38号。起点火车东站,坐808路公交车,在东凤路口下车,就可看到有个写着“广州市轻工高级技工学校欢迎您”的牌坊。就在那路口直走200米左右。也可在路口左3块的摩托车进去。

伙食:说实话,很不好,很多人自己都准备一大包的泡面。排队时间长,饭菜差。

学生素质:说不准,学校那么多人,看你遇上什么人咯。印象当中有绅士风度的人较少哦。男生多,女生较少。

学校:学校乱就不会,因为学生根本就没自由,哪来闹事的空间哦!一天到晚,住宿生只能待在学校。跟高中没区别!

如果你是高中毕业想过来就读,那我提醒一下你哦,宿舍是八个人一间的,根本就没地方给你放电脑,而且宿舍没有网线的。还有,你的大专学历是成人教育,大专毕业z书要等你技校毕业后第二年的三月份,还有哦,学校考证的证书发放较迟的!

我想到的不可能很全面的,如果你想再知道点其他的,那你想到后再问吧。希望对你有点帮助咯!

『拾』 广州轻工业职业学校

提问者应该是问天河客运站对面那家

广州轻工职业学校,原轻工中专

这个学校校风还过的去,因为他们学生科长是严厉的退伍军人,坏学生都敬畏他即使当面或背后说他坏话也只叫他杨科不敢叫花名

至于专业强在机械数控模具自动化方面,近10年年都有学生老师拿到比赛很前的名次,但这些班多数是和尚班,纪律会差些,只要你肯学还是能学到东西的

至于纪律好的班大多数是文科班,但这个学校的文科学不到什么东西的

还有一个专业是食品分析专业,他们这个专业连续5届学风都很好学生很乖专业也学的到东西分配工作也不错,这个班的学生素质不比普通高中的差

这个学校连续几年评为国家重点中专,硬件也很不错的


欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/dianzi/9128545.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-04-25
下一篇 2023-04-25

发表评论

登录后才能评论

评论列表(0条)

保存