QQ704630835的博客

一、背景最近在做一个数据集，但是数据集是不同人标注的，不同人标注的习惯和方式不同，因此需要对数据集做一些后处理。二、问题介绍做好数据集之后，需要对txt文本进行统计，统计的时候发现了下面的情况：很明显里面的two和2是一个意思，但是他们却是按不同的内容来记录的，因此需要将他们改为一致。另外还有一些特殊情况，比如：统计的文本中还有类似于制表符，单词前和单词后有空格，这些都...

一、原理小结最近在学习用python的爬虫爬取网络上的图片，制作数据集并用于后续的一些实验。看了很多关于python爬取图片的介绍，并验证了相关代码，先推荐几个介绍比较好的爬虫过程：[1]小白爬虫第一弹之抓取妹子图（这篇博客的过程讲解的非常详细）[2]Python爬虫之——爬取妹子图片（静态图片爬取）[3]利用python爬取网页图片（动态加载图片的爬取）总体上来说，爬虫的主要...

一、背景网上对于爬取股票数据有相对完善的教程。不过大部分教程都是只能够爬取一段时间的股票数据，针对某一只股票的历史数据爬取，目前还没有看到比较好的教程。下面对近期学的东西进行一点点小结。二、股票数据爬取网站网上更多推荐的是东方财富的股票数据，链接为：http://quote.eastmoney.com/stocklist.html东方财富上能够获得所有股票的编号信息，有助于股票...

一、背景人脸表情识别网上已有很多教程，大多基于fer2013数据集展开的。现在的问题就在于fer2013数据集的数量太少，表情的区分度不够明显，大部分基于此数据集的模型，其识别精度仅有70%左右。因此我想自己从零开始制作人脸表情，而且是非常夸张，有趣的人脸表情，用于后续的表情识别实验。这一篇仅仅介绍如何在没有任何数据的情况下，从零开始制作人脸表情数据集。二、数据获取首先没有任何数据...

一、背景最近在做CNN分类时，用了一个能够一次性读取文件夹下所有数据并按文件夹制作相应标签的函数。之前做13类别，总计约1000张图片时，用这个函数没有任何问题，但后后来加到约40000张图片的时候，运行就报错。二、问题描述用CNN做多类别分类时，往往需要大量数据，由于我自己是没有这么多数据的，所以很多数据需要从网上爬，总计约4万张图，进行CNN分类实验。进行完数据预处理之后，关键...

目录一、背景二、数据集整理1.the UC Merced Land Use Dataset（约110M）2.DOTA：A Large-scale Dataset for Object Detection in Aerial Images（约35G）3.NWPU VHR-10（约73M）4.UCAS-AOD: Dataset of Object Detection i...

一、背景近期一直再补图像处理方面的基础，偶然看到了布朗大学的计算机视觉课程，所以就计划把这些课程的核心内容简单记录下来，也顺便为后边学习的人提供一个参考，下面直接开始。二、课程介绍这门课程是布朗大学2010年的春季课程，布朗大学毕竟也是藤校之一，而且这门课程的内容还挺丰富的，所以非常值得一看。这么课程的参考书所用的是《Computer Vision: Algorithms and Ap...

一、背景最近刚开始做视觉问答VQA，看了很多文献，但是目前还无从下手，所以准备先把网上的公开的VQA数据集记录下来。前面自己也读了一些文献，文献中多多少少都有介绍数据集的情况，比如：[1]【文献阅读】VQA的综述：数据集，算法和挑战（K. Kafle等人，Computer Vision and Image Understanding，2017）[2]【文献阅读】兼顾图像理解和推理能...