- 博客(67)
- 收藏
- 关注
原创 【爬虫、数据可视化实战】以“人口”话题为例爬取实时微博数据并进行舆情分析
近期在weibo上讨论的比较热的话题无非就是“人口”了。TaoTao也看了一些大家发的内容。但是感觉单纯的看文字内容不能很直观的反应出来大家的关切。索性就使用爬虫对数据进行爬取,同时结合着数据可视化的方式让数据自己开口说话。那么接下来就让我们使用技术进行分析吧!
2024-01-21 12:45:32
2345
3
原创 爬虫实战-微博评论爬取
【爬虫实战】爬取微博评论数据,一键获取指定微博的评论内容,包括评论内容,评论id,评论ip,评论者的账号信息,包括性别,关注人数,粉丝人数等等……
2023-12-28 01:57:33
1625
原创 NLP项目实战01--电影评论分类
在这里,我们将探讨一个常见而重要的自然语言处理任务——文本分类。具体而言,我们将关注情感分析任务,即通过分析电影评论的情感来判断评论是正面的、负面的。
2023-12-09 07:56:52
587
原创 wsl2中安装docker
这个脚本在执行之前需要先执行chmod +x install-docker.sh这个命令。如果希望每次启动的时候,都给docker启动的话,可以执行下面的这个命令。执行docker version,如果如下所示,则表示安装成功了。这个问题的话,需要执行下面的命令,然后选择1。再推出terminal重新进。
2023-07-16 11:10:32
2950
原创 实时口罩佩戴检测
2020年开头真的很人意外,开年爆发了疫情。此次疫情牵动了各行各业,在这里衷心的感谢奋斗在一线的医疗工作者:您们辛苦了。作为一名非医专业的学生,在这样情况下,除了不乱跑以外,我也想以另一种方式去致敬那些保护着全国人民安全的工作人员。接下来就来分享一个实时口罩检测小demo实现环境Linux或者windows皆可anacondapytorch>=1.0opencv>=3.0工程目录Load_model文件夹主要放置的是训练的识别模型models文件夹下放置的是一些相关实现.
2021-08-20 20:35:06
948
1
原创 语音识别小工具
于大二的时候开始接触图像识别,算起来至今也有两年之久了。也做过很多的关于图像方面的项目包括人脸识别、垃圾分类系统、新冠肺炎检测系统等等。最近比较的想接触一下语音识别,再此记录一下第一个语音识别项目项目由来该项目其实也并不是完完全全由笔者开发的,而是一个同学在做毕业设计的时候给我的。正好可以供我研究一下。主要代码主要的代码如下:from pyaudio import PyAudio,paInt16import time,waveclass mic(): '''录音类''' .
2021-05-20 23:10:10
1018
9
原创 垃圾分类识别系统(目标检测版)
垃圾分类收集处理,能提高资源化利用程度。 在垃圾成分中,其中的金属、纸类、塑料、玻璃等是可直接回收利用的资源,回收利用率高,较之开发自然资源有着处理简单、成本低廉、污染小的优势。说明:自笔者于2019年8月发出了深度学习实战之垃圾分类博文以来,已被访问上万次,几百次的收藏。同时也有很多的人询问笔者关于这个项目的问题。在这里非常的感谢大家的厚爱。其实很早就想再迭代一个垃圾分类项目出来,但是由于之前比较的忙,一直没有时间将其落实。最近没什么事情,笔者花了一些时间又重新做了一个垃圾分类系统深度学习之..
2021-02-21 16:58:54
10960
21
原创 深度学习实战--垃圾分类识别系统
垃圾分类收集处理,能提高资源化利用程度。 在垃圾成分中,其中的金属、纸类、塑料、玻璃等是可直接回收利用的资源,回收利用率高,较之开发自然资源有着处理简单、成本低廉、污染小的优势。说明:自笔者于2019年8月发出了深度学习实战之垃圾分类博文以来,已被访问上万次,几百次的收藏。同时也有很多的人询问笔者关于这个项目的问题。在这里非常的感谢大家的厚爱。其实很早就想再迭代一个垃圾分类项目出来,但是由于之前比较的忙,一直没有时间将其落实。最近没什么事情,笔者花了一些时间又重新做了一个垃圾分类系统。希望对大家学习.
2021-01-24 14:18:46
12692
42
原创 新冠肺炎病毒(Covid-19)检测系统
放弃,属实不是我性格,为了确保数据的相对准确,笔者来到了离家50公里的当地市三甲医院咨询,说明来意后,医生欣然拿起笔者收集的数据和我交谈了起来,最终,笔者将数据标注好了。拿到手时,一头雾水,看不懂……笔者开始寻思着,采用C/S端进行整合的,但是笔者设计得太丑了,同时C/S端也没有B/S端使用起来方便,于是就采用了B/S端。这里说明一下,笔者并不擅长前端,这里参考了前辈的一个前端界面,并再其中进行了相应的调整,同时也上了笔者的想法。可以看到,检测结果还是不错的,达到了预期的效果了。——笔者的开发环境如下:。
2021-01-20 16:13:52
3997
10
原创 Java在指定路径下执行cmd命令的方法
目前状态:毕业设计ing背景:做毕设时,由于需要将python的运行效果展示出来,所以使用了Java写了一个前端的界面。但是在使用Java对python的脚本进行调用时就尴尬了,出错……这里也许有人会疑问了,为什么不使用Django呢,就我个人而言吧,对Django使用的不是很熟悉,尽管它很方便,然而我学习过一年的企业级应用开发,索性就使用了Java进行开发。问题:开始想着在maven的pom.xml中配置一个python的接口直接调用已经封装好的python脚本,结果尴尬了,调用一般的文件都.
2021-01-11 21:14:14
3617
原创 深度学习实战之手写签名识别(100%准确率、语音播报)
手写签名在日常生活中随处可见,简单来说就是亲笔书写自己的名字,在纸质文档上使用手写签名主要用以确定签字者的身份,并表示签字者同意所签署文档中规定的内容,对文档的真实性负责,且具有法律效力。由此看见手写签名的重要性。在现实的生活中不乏有不法分子模仿其他人的字体,进而模仿他人的签名获得不发的利益。尽管会有鉴别字体的工作,但在鉴别时不仅不准确,而且还十分的消耗人力以及财力。为了解决这一客观显示存在的问...
2020-04-23 15:29:52
11617
16
原创 基于python人脸识别考勤系统(语音播报)
介绍:本项目是大二寒假在家没事写的,一直没有时间讲本项目分享出来,现在有时间了哈。那就让我简单的将项目介绍一下吧。好了废话不多说了,直接上图初始化界面:可以看到所有的功能都展现在了左边的功能栏中了点击信息录入在此处填写完必要的个人信息之后,系统会对使用者的面部进行特征提取。进行人脸签到:在签到完成之后,系统会普配到使用者的姓名,同时将会以语音播报的方式将信息播报...
2020-04-12 09:33:46
7300
15
原创 基于yolo的口罩识别(开源代码和数据集)
2020年开头真的很人意外,开年爆发了疫情。此次疫情牵动了各行各业,在这里衷心的感谢奋斗在一线的医疗工作者:您们辛苦了。作为一名非医专业的学生,在这样情况下,除了不乱跑以外,我也想以另一种方式去致敬那些保护着全国人民安全的工作人员。接下来就来介绍本项目的开发过程。1. 开发环境笔者的开发环境如下:ubuntu16.04PyTorch 1.1.0anacondaopencv-pyth...
2020-02-17 19:08:19
28768
75
原创 关于yolov3在训练自己数据集时容易出现的bug集合,以及解决方法
**早先写了一篇关于yolov3训练自己数据集的博文Pytorch实现YOLOv3训练自己的数据集 **其中很详细的介绍了如何的训练自定义的数据集合,同时呢笔者也将一些容易出现的bug写在了博文中,想着的是可以帮助到大家。很荣幸这一篇博客收到了,大家的认可。最近一段时间有很多的学长、学姐、学弟、学妹询问其中出现的问题。可是问的都是我没有遇到过的,很尴尬。今天我花了一下午的时间,解决了这几个...
2020-02-16 22:42:03
5448
29
原创 org.apache.jasper.JasperException: Unable to compile class for JSP:
问题描述:type Exception reportmessagedescription The server encountered an internal error () that prevented it from fulfilling this request.exception具体错误如下图问题分析:由报错信息可以看出在运行Maven时,出现了Tomcat和jre的版本...
2019-12-09 19:20:49
255
原创 基于深度学习的一款五子棋小游戏
今天分享一个基于深度学习而开发的AI小游戏简单介绍这一款基于深度学习的五子棋小游戏的界面是使用Unity开发的,而网络结构是使用keras搭建的。环境笔者的环境如下操作系统 windows 10使用框架是keras初始化界面游戏界面棋谱部分代码using System;using System.Collections;using System.Collections...
2019-11-10 11:44:56
2665
原创 实现车道线检测
当今计算机视觉在我们的日常生活中运用的十分广泛,例如人脸识别、自动驾驶、等等由于对自动驾驶十分感兴趣,因此就花了一些时间实现了车道线检测环境笔者的环境配置如下:ubuntu 16.04python3.7opencv >=4.0说明:这里的系统以及python的版本都不是固定的,读者使用win10 win7也是可以的但是python的版本一定要是3.x的版本第三方库这里...
2019-10-24 18:32:53
1256
5
原创 java使用JDBC操作数据库(增删改查的方法)
import java.sql.*;import java.util.Scanner;public class Connect { static final String DB_URL="jdbc:mysql://localhost:3306/newdata?serverTimezone=UTC"; static final String USER_NAME="root";...
2019-10-16 21:59:21
564
转载 用户、话题、评论一网打尽,分享一个最强微博爬虫
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本...
2019-10-12 08:26:58
1134
原创 windows如何安装MySql(包含一些安装时问题的解决)
我们知道,在日常的软件开发过程中数据库是必不可少。接下来笔者这里就记录一次在windows上安装MySql的过程下载安装包首先大家需要下载MySql的安装包,可以去官网进行下载MySql官网链接当然了,如果不想去官网下载的话笔者这里给大家提供了下载好的安装包链接:https://pan.baidu.com/s/1xSTTkik5H6QRrPjIYSY8iA提取码:ik7l进行安装...
2019-09-12 10:18:27
201
原创 解决win10的wifi打不开或无法搜索到周围wifi的问题
今天笔者遇到了一个比较奇葩的问题,就是笔记本电脑的wifi打不开了,即使打开了也是搜索不到周围的wifi的。这个问题一开始笔者没有发现,因为在暑假期间都是使用笔记本连接自己的手机热点进行上网的。然而暑期结束,笔者回到了学校,在宿舍有宽带,所以就没有注意到wifi不能正常使用的情况。也就在今天,上课时,老师使用红蜘蛛控制笔者的笔记本。然后笔者觉得听老师上课没什么意思,就想着不使用教室的网线,使用自...
2019-09-09 23:41:46
27600
13
原创 深度学习实战之垃圾分类
垃圾分类,指按一定规定或标准将垃圾分类储存、分类投放和分类搬运,从而转变成公共资源的一系列活动的总称。分类的目的是提高垃圾的资源价值和经济价值,力争物尽其用;然而我们在日常生活中认为对垃圾分类还是有些不知所措的,对干垃圾、湿垃圾……分的不是很清楚,由此我们就想到了使用深度学习的方法进行分类。简介本篇博文主要会带领大家进行数据的预处理、网络搭建、模型训练、模型测试1. 获取数据集这里笔者...
2019-08-31 21:00:01
25299
148
原创 将多个txt文件中的内容写在一个txt中的方法
import osfilename='./train_data/img_'for i in range(1,19736): newfile=filename+str(i)+'.txt' if os.path.exists(newfile): read= open(newfile, 'r') for line in read: ...
2019-08-21 14:34:58
460
原创 Tensorflow2.0实战之GAN
本文主要带领读者了解生成对抗神经网络(GAN),并使用提供的face数据集训练网络GAN 入门自 2014 年 Ian Goodfellow 的《生成对抗网络(Generative Adversarial Networks)》论文发表以来,GAN 的进展突飞猛进,生成结果也越来越具有照片真实感。就在三年前,Ian Goodfellow 在 reddit 上回答 GAN 是否可以应用在文本领域...
2019-08-19 22:24:10
8849
13
原创 Tensorflow2.0实战之Auto-Encoder
autoencoder可以用于数据压缩、降维,预训练神经网络,生成数据等等Auto-Encoder架构需要完成的工作需要完成Encoder和Decoder的训练例如,FashionMnist的一张图片大小为784维,将图片放到Encoder中进行压缩,编码code使得维度小于784维度,之后可以将code放进Decoder中进行重建,可以产生同之前相似的图片。Encoder和Decod...
2019-08-18 16:48:59
2202
1
原创 安装Tensorflow-gpu版本
下载cuda**链接:**https://developer.nvidia.com/cuda-10.0-download-archive?target_os=Windows&target_arch=x86_64&target_version=10&target_type=exelocal如果电脑上本身就有Visual Studio Integration,要将这个...
2019-08-18 00:29:33
1104
原创 Tensorflow2.0:使用Keras自定义网络实战
tensorflow2.0建议使用tf.keras作为构建神经网络的高级API背景介绍:2012年 AlexNet 在 ImageNet 上显著的降低了分类错误率,深度神经网络进入迅速发展阶段。在2014年牛津大学机器人实验室尝试构建了更深的网络,文章中称为"VERY DEEP CONVOLUTIONAL NETWORKS",如VGG16,有16层,虽然现在看起来稀疏平常,但与 AlexN...
2019-08-17 18:55:01
2476
1
原创 解决Tensorflow2.0出现:AttributeError: module 'tensorflow' has no attribute 'get_default_graph'的问题
问题描述在使用tensorflow2.0时,遇到了这个问题:AttributeError: module ‘tensorflow’ has no attribute ‘get_default_graph’这个报错的意思是:tensorflow模块没有get_default_graph属性错误原因这是由于Keras API(https://keras.io/)有多个实现,包括原始和参考实...
2019-08-16 22:00:57
74366
32
原创 Tensorflow2.0使用Resnet18进行数据训练
在今年的3月7号,谷歌在 Tensorflow Developer Summit 2019 大会上发布 TensorFlow 2.0 Alpha版,随后又发布的了Beta版本。Resnet18结构Tensorflow搭建Resnet18导入第三方库import tensorflow as tffrom tensorflow import kerasfrom tensorflo...
2019-08-16 16:04:52
16362
18
原创 笔记4:Tensorflow2.0实现VGG13
导入必要的库:import osimport tensorflow as tffrom tensorflow import kerasfrom tensorflow.keras import datasets,layers,optimizers,Sequential,metricsos.environ["TF_CPP_MIN_LOG_LEVEL"]='2'tf.random.set_s...
2019-08-15 23:04:43
2481
1
原创 笔记3:Tensorflow2.0实战之MNSIT数据集
最近Tensorflow相继推出了alpha和beta两个版本,这两个都属于tensorflow2.0版本;早听说新版做了很大的革新,今天就来用一下看看这里还是使用MNSIT数据集进行测试导入必要的库import tensorflow as tffrom tensorflow.keras import datasets, layers, optimizers, Sequential, ...
2019-08-13 23:41:45
621
原创 笔记1:使用奇数卷积核的原因
在CNN中我们通常会使用3×3、5×5、7×7等奇数的卷积核,而很少见过使用2×2、4×4等偶数的卷积核的,这是为什么呢?原因如下:1.在对图像进行卷积时,为了尽量的减少特征的损失。此时对图像进行卷积,使得卷积前后的图像的大小同输入一样保持不变。故我们需要进行padding。现在我们设输入图像的大小为n×n,卷积核大小为k×k,padding的大小就为(k-1)/2,根据卷积公式:...
2019-08-11 17:40:31
873
原创 解决OpenCV编译时./bin: error while loading shared libraries: libopencv_highgui.so.3.2: cannot open的问题
1.问题安装好了opencv后,用其去检测是否可以使用时,出现了如下的问题:2.解决参考这篇博文点击的环境配置即可解决
2019-08-10 09:04:28
4080
4
原创 解决opencv测试时OpenCV Error: Unspecified error (The function is not implemented.的问题
在安装好opencv时,出现如下的报错信息:OpenCV Error: Unspecified error (The function is not implemented. Rebuild the library with Windows, GTK+ 2.x or Carbon support. If you are on Ubuntu or Debian, install libgtk2.0...
2019-08-10 08:55:31
8653
6
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人