前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >人群密度估计

人群密度估计

作者头像
用户1148525
发布2019-05-26 11:46:00
1.4K0
发布2019-05-26 11:46:00
举报

CSRNet: Dilated Convolutional Neural Networks for Understanding the Highly Congested Scenes CVPR2018

针对复杂场景的拥挤场景理解我们提出了一个 CSRNet 网络,该网络主要包括两个部分,前端使用一个 卷积网络用于 2D 特征提取,后端用一个 dilated CNN。 该网络在几个常用的公开人群密度估计数据库上取得了不错的效果。

1 Introduction 拥挤场景解析的发展从简单的人群数值估计到 人群密度图估计,人群密度图可以提供额外的信息,因为同样数量的人可以分布在不同的位置,如下图所示

这里写图片描述
这里写图片描述

生成准确的人群分布图挑战性比较大,其中一个主要的困难就是离散化的问题,人在图像中不是只占用一个像素,密度图需要保持局部邻域的连续性。其他的困难包括场景的多样性,相机角度的多样性。

以前基于CNN网络的人群密度估计主要采用了 multi-scale architectures,虽然取得了不错的性能,但是存在两个问题:当网络变深的时候, the large amount of training time and the non-effective branch structure ,这里我们设计了一个实验验证了 multi-column CNN (MCNN) 表现的效果没有 比 没采用 multi-column 的要好。 这里我们设计了一个 a deeper, regular network with the similar amount of parameters

这里写图片描述
这里写图片描述

设计 multi-column CNN (MCNN) 的本意是希望可以学习不同尺寸感受野的特征,但是下图显示三个column 学习到的特征相似,没有达到设计之初的目的。

这里写图片描述
这里写图片描述

人群密度估计从方法上来说可以分为三大类:detection-based methods, regression-based methods, and density estimation-based methods

其中基于CNN的密度图估计多数采用了 multi-column based architecture (MCNN) 的架构,我们观察到这种结构存在几个问题: 1)Multi-column CNNs 比较难训练 2)Multi-column CNNs 引入了冗余的网络结构,如表1 所示 3) 需要 density level classifier ,这样计算量比较大 4) 这些网络用了很大一部分参数用于 density level classification,用于密度图估计的参数占小部分

3 Proposed Solution 这里我们不采用多分支网络结构 The fundamental idea of the proposed design is to deploy a deeper CNN for capturing high-level features with larger receptive fields and generating high-quality density maps without brutally expanding network complexity.

3.1. CSRNet architecture 网络的前端我们采用 VGG-16 卷积层部分,在后端我们采用 dilated convolutional layers

3.1.1 Dilated convolution

这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述

3.1.2 Network Configuration

这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述

3.2. Training method 3.2.1 Ground truth generation

这里写图片描述
这里写图片描述

不同数据库真值密度图的生成

3.2.2 Data augmentation 这里我们做了一些数据增强来增加训练样本的数量

3.2.3 Training details 损失函数如下:

这里写图片描述
这里写图片描述

4 Experiments 4.1. Evaluation metrics

这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
这里写图片描述
本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2018年04月09日,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档