Python
文章平均质量分 81
梁先森-在技术的路上奔跑
希望能做一个为周围人带来温暖,为家人和爱人带来幸福,为社会做出贡献的人
展开
-
使用pipenv完美解决pyinstaller打包exe过大的情况
使用pipenv完美解决Pyinstaller 打包exe过大原创 2021-08-15 16:46:50 · 1543 阅读 · 0 评论 -
pytorch Embedding的实战和用法解析
本篇博客着重于进行代码实战讲解,目的是弄清楚它的实际运行情况和常规参数表达含义。至于一些理论的东西,我认为其他博主解释的已经相当好了,在下面的文章中我也会将其引用出来。为什么使用嵌入层Embedding?来源:https://www.jiqizhixin.com/articles/2019-03-27-71、使用One-hot 方法编码的向量会很高维也很稀疏。假设我们在做自然语言处理(NLP)中遇到了一个包含2000个词的字典,当使用One-hot编码时,每一个词会被一个包含2000个整数的向.原创 2021-07-18 22:00:42 · 9320 阅读 · 8 评论 -
python log日志常用用法总结
* DEBUG 等级最低的,最详细的日志信息,典型应用场景是 问题诊断* INFO 信息详细程度仅次于DEBUG,通常只记录关键节点信息,用于确认一切都是按照我们预期的那样进行工作* WARNING 当某些不期望的事情发生时记录的信息(如,磁盘可用空间较低),但是此时应用程序还是正常运行的* ERROR 由于一个更严重的问题导致某些功能不能正常运行时记录的信息* CRITICAL 当发生严重错误,导致应用程序不能继续运行时记录的信息原创 2021-07-05 10:16:12 · 2785 阅读 · 2 评论 -
python 中yaml文件简单用法总结
YAML是一种标记语言,它使用空白符号缩进和大量依赖外观的特色,特别适合用来表达或编辑数据结构、各种配置文件、倾印调试内容、文件大纲。原创 2021-07-03 20:14:36 · 4412 阅读 · 3 评论 -
python 爬虫 一键爬取携程旅游团数据
太难了...携程数据不会爬?看这篇就够了原创 2020-06-14 11:17:22 · 8886 阅读 · 4 评论 -
从0到1使用python开发一个半自动答题小程序
最近每天都有玩微信读书上面的每日一答的答题游戏,完全答对12题后,可以瓜分无限阅读卡。但是从小就不太爱看书的我,很难连续答对12道题,由此,产生了写一个半自动答题小程序的想法。我们先看一张效果图吧原创 2020-05-11 21:15:50 · 5709 阅读 · 9 评论 -
秒懂-深度学习框架的中计算准确率accuracy()原理(基于paddlepaddle)
前言最近在实操号称人工智能中的’hello world‘–手写数字集识别。这里是使用的是paddlepaddle深度学习框架。其中我们在训练的时候,需要计算准确度。框架提供计算准确度的方法:fluid.layers.accuracy().它究竟是如何进行精确度的计算的?今天,我带大家一探究竟!文章目录前言accuracy方法介绍accuracy()部分源码解析总结概括accuracy方法介...原创 2020-03-15 13:50:25 · 8145 阅读 · 0 评论 -
一篇文章带你彻底搞清楚paddlepaddle框架中的DataFeeder()
在连续实战完paddlepaddle线性回归例子和波士顿房价预测后,对这个框架基本构成有了比较清楚的了解。但是,这两个例子的区别之一就在于后者使用的是框架自带的数据,传入数据时使用了内部一种数据类型转化器DataFeeder()。下面,我将带着大家一起去探究这个DataFeeder()。原创 2020-03-15 12:58:51 · 1810 阅读 · 0 评论 -
这可能是功能最少的Markdown编辑器了,但我仍然要推给大家---miu
前言Markdown 文件写作形式越来越受欢迎,特别是程序员。如果你是一个整天用记事本写东西的程序员,赶紧的!赶紧去学一学Markdown写作模式。上手特别简单,而且一但上手,就根本不想回归记事本了。下面给大家推荐一款小众的Markdown编辑器。这个编辑器叫miu原创 2020-03-14 16:47:49 · 667 阅读 · 0 评论 -
今天终于弄明白了python迭代器是什么(含paddlepaddle部分源码解析)
最近在学习paddlepaddle深度学习框架,在实战波士顿房价预测例子的时候,yield函数困扰到了我。索性,我就将python迭代器琢磨了一遍,终于弄清楚了!。一句话:迭代器是可以记住遍历位置的函数。(有C基础的可对比指针)原创 2020-03-12 21:54:03 · 1091 阅读 · 0 评论 -
Python爬虫中多线程、多进程、多协程的介绍和对比
前面咱们也写了好几篇爬虫的文章,都是些数据量不是很多的例子。那如果遇到数据量比较大的时候怎么办提高速度和效率呢。今天的这篇会给你答案。一、线程、进程、协程的简介1.同步、异步、并行、并发同步:各个任务不是独自运行的,任务之间有一定的运行顺序异步:各个任务是独立运行的,一个任务的运行不收另一个任务的影响并行:同一时刻发生若干事情的情况并发:同一时间段发生若干事情。这里可能并行和并发...原创 2019-12-12 11:35:13 · 885 阅读 · 0 评论 -
Python爬虫使用cookie登录获取推荐帖子
项目背景:在之前的文章中,咱们练习了爬取虎扑的帖子【项目链接】,练习了使用selenium测试化工具获取论文信息【项目链接】,今天,就来实践免账号密码登录,获取推荐帖子。从本文中,你将能学到如何使用cookie免登录和具体分析过程;掌握了这个方法,其他项目也很容易上手了。Python爬虫使用cookie免登录获取推荐1. Cookie免登录-获取基础问题以及链接老步骤,首先咱们先在浏览器...原创 2019-12-11 09:40:31 · 808 阅读 · 0 评论 -
Python爬虫之使用selenuim测试化工具爬取论文信息
最近,导师交给了我们一个任务,让我们核查各个学校提交上来的资料是否正确,我分到的任务就是核查所提交上来的已被收录的论文是否能在相应的期刊搜索的到,以及其他相关信息是否正确。于是,我就想着使用python爬虫帮我自动化完成这些任务。所使用的网站是:IEEE网站首页截图是:我的第一想法就是使用咱们前一篇博客爬取hupu论坛帖子数据的方法,来进行这次的任务。python爬虫爬取虎扑湖人论坛专...原创 2019-12-03 17:08:27 · 931 阅读 · 0 评论 -
python爬虫爬取虎扑湖人论坛专区帖子数据,并存入MongoDB数据库中
今天就带大家从头到尾一步一步带着大家爬取虎扑论坛帖子的数据,里面涉及到的一些知识,我会给出学习的连接,大家可以自行去学习查看。前期准备首先我们打开虎扑NBA论坛,我选择的是湖人专区(小湖迷一个)。虎扑湖人专区我们需要爬取的数据有这些好了 每一个小帖子我们需要爬取图中的这七个数据,接下来我们利用浏览器的开发者模型,查看我们需要的东西。我举个例子:首先打开浏览器的开发者模式,谷歌浏览...原创 2019-11-21 09:26:51 · 2203 阅读 · 0 评论 -
Python 关于列表方法append的一些新的认识
最近在学习python爬虫,需要将爬取到的数据写入excel文件中,其中,就需要用到列表进行数据的暂时存储,就会用到append()这个方法,具体我是想通过将一个房屋的相关信息放入到一个列表中,然后再通过循环的方式将这个列表作为一个参数通过append 添加到另一个列表中。在每次循环前,我想通过clear方法进行第一个列表的数据清除。然后就遇到了问题,发现之前存入第二个数组中的数据也没有了。...原创 2019-11-09 18:07:59 · 1709 阅读 · 0 评论