云中寻雾的博客_云net_CSDN博客-python,算法,lintcode练习笔记领域博主

转载查看mysql的版本号

查看mysql的版本号 1.1 在命令行登录mysql，即可看到mysql的版本号 [root@heyong ~]# mysql -uroot -p Enter password: Welcome to the MySQL monitor. Commands end with ; o...

2020-05-26 09:24:50 11 0

转载一次mysql大数据量查询慢查询导致服务阻塞后的学习

场景还原：前一个月给朋友写了个简单的登录功能，简单的查询数据库登录逻辑，使用mysbatis-plus进行的dao层代码生成（吐槽一下这个工具，真是方便一时爽，后面维护难，比较喜欢自己能够组装和优化sql，大数据量插入时候mybatis-plus性能极差都是生成的单条插入sql然后flush），没...

2020-05-25 09:16:06 12 0

转载业务流程建模标注(BPMN)详细介绍

1、基本信息摘要：该文章的目的是对BPMN(Business Process Modeling Notation)的概要描述和介绍。描述基本的BPMN符号，包括这些图元如何组合成一个业务流程图（Business Process Diagram） 2、BPMN简介 2.1概述该文章的目的...

2020-05-24 14:15:41 21 0

转载说明关系型数据库通过索引提升查询效率的背后原理

如果没有索引，数据库引擎需要通过全表扫描来查找数据，这会产生大量的磁盘IO。关系型数据库使用B+树构建索引来加速加快查询。B+树是一种二叉查找树（每个节点的键值必须：比保存在左子树的任何键值都要大，比保存在右子树的任何键值都要小），这样随机查找某个键值时可以通过从根节点执行二叉查找来加速查询，...

2020-05-12 08:48:05 35 0

转载斐波那契数列的5种python写法

斐波那契数列的5种python写法斐波那契数列（Fibonacci sequence），又称黄金分割数列、因数学家列昂纳多·斐波那契（Leonardoda Fibonacci）以兔子繁殖为例子而引入，故又称为“兔子数列”，指的是这样一个数列：1、1、2、3、5、8、13、21、34、……在数学...

2020-05-09 17:51:53 98 0

转载 Python数据分析与挖掘实战总结

第三章数据探索 3.1 数据质量分析 3.1.1 缺失值分析缺失值的处理分为三种情况: 删除存在缺失值的记录; 对可能的数据进行插值:拉格朗日插值,牛顿插值法: 3.1.2 异常值分析首先可以先使用describe()函数查看数据的基本情况: import pandas as...

2020-05-08 18:54:16 93 0

原创 Restoring from checkpoint failed.模型加载失败的问题及解决方案

InvalidArgumentError (see above for traceback): Restoring from checkpoint failed. This is most likely due to a mismatch between the current graph and...

2020-04-27 11:23:24 207 0

转载【MySQL】mysql区分大小写问题

最近模糊查询数据库里面的内容时，发现查询出来的内容与自己想要的不一样，筛选的结果区分了大小写。参考博客链接：https://www.cnblogs.com/457248499-qq-com/p/7360284.html 1、MySQL默认情况下是否区分大小写，使用show Variabl...

2020-04-02 10:25:46 49 0

转载 python爬虫：爬取链家深圳全部二手房的详细信息

1、问题描述：爬取链家深圳全部二手房的详细信息，并将爬取的数据存储到CSV文件中 2、思路分析: (1)目标网址：https://sz.lianjia.com/ershoufang/ (2)代码结构： class LianjiaSpider(object): def _...

2020-03-31 16:26:20 262 0

转载 Python嵌套列表转一维（压平嵌套列表）

前一段去云英面试，技术官很”不厚道“了问了一个非常简单的问题：如何将多维列表转化了一维的？当时虽然想到了使用迭代或者列表生成式可以做到，但是可以没能可行的代码，回来后一顿后悔。对于规范的且嵌套维度较低的多维列表，python中有很多方法可以实现： a=[[1,2],[3,4],[5,6]]...

2020-03-26 15:32:24 62 0

转载 pycharm使用远程环境debugger不了，但却能运行，已解决

IDE软件：Pycharm专业版远程环境：Vagrant虚拟机Centos7.0 python环境：python3.6 问题描述：python程序能够正常运行，debugger的时候，不会进入debugger，而是直接运行程序，给与结果。（相当于debugger完全没有用） debugg...

2020-03-25 13:55:51 77 0

转载百度地图动态添加轨迹坐标点

1、首先成为百度开发者(注意选择浏览器端和JavascriptAPI) 2、申请秘钥(如果不想对访问网址进行限制的话 Referer白名单使用 * ) 3、生成轨迹代码 <!DOCTYPE html> <html> <head> <...

2020-03-24 16:37:36 115 0

转载 Numpy中数据的常用的保存与读取方法

文章目录: 1.保存为二进制文件(.npy/.npz) numpy.save numpy.savez numpy.savez_compressed 2.保存到文本文件 numpy.savetxt numpy.loadtxt 在经常性读取大量的数值文件时(比如深度学习训...

2020-03-23 16:32:35 71 0

转载 pandas性能提升之避免对小数据量使用pandas内置函数

pandas本身就是面向数据分析的，而且是面向大数据分析的，所以其内置函数本身在设计上相比于一些python原生的操作就会繁杂一些，这也是为了功能性的考虑。所以，这就导致了其内置函数就像高速火车，而python的原生操作就像超跑，超跑在速度上是具有优势的，但是在功能性上是比不上高速火车的。所以，理...

2020-03-20 16:06:40 35 0

转载 pandas之apply和for loop之间的比较和权衡

首先，文章开头就需要强调的是：对于大的数据量，能不用loop就尽量不用loop，无论是for loop还是apply，尽量用内置函数实现。在pandas里，我们经常听到一句话就是尽量减少for loop的时候，尽量用apply去替代，但是这句话是有语境的，并不一定的正确的，实际上，在panda...

2020-03-20 16:03:46 54 0

转载 python:如何准确的获取一个对象（比如字典）的内存占用

python中，sys模块里面有一个getsizeof函数，其可以获取某个对象的内存占用，但是要注意的是，该函数只能获取对象本身直接占用的内存，该对象所指向的引用所占据的内存并不会被计算在内；python中，比如当对象是一个容器时，那么getsizeof函数就无法获取该容器内部所有内容的内存占用了...

2020-03-20 15:51:41 94 0

转载【Pandas】Pandas处理大数据集的方法（内存优化，减少内存使用量90%）

目录将内存使用量减少高达90％的方法使用棒球比赛日志数据帧的内部表示了解子类型使用子类型优化数值列将Numeric与String存储进行比较使用分类优化对象类型读取数据时选择类型分析棒球比赛总结和后续步骤将内存使用量减少高达90％的方法当使用具有...

2020-03-20 15:03:04 50 0

转载 python中使用psutil查看内存占用

有的时候需要对python程序内存占用进行监控，这个时候可以用到psutil库，Anaconda中是自带的，如果import出错，可以用pip install psutil(安装在python中）或conda install psutil（安装在Anaconda中） #常用的： import ...

2020-03-20 14:14:07 53 0

转载 python变量的内存机制

作为一门简单易用的语言，且配备海量的库，python可谓是程序员手中的掌中宝，编程本身就是一种将人类思维转化为计算机思维的技术，如果不需要去追求极致的运行效率同时又不限制于计算机内存空间，python无疑是目前最方便的语言了。作为一个合格的程序员，自然是要知其然并知其所以然，除了能够应用pyt...

2020-03-20 13:53:32 24 0

转载 python字符串有多少字节

python字符串有多少字节是否有一些函数可以告诉我字符串在内存中占用多少字节？我需要设置套接字缓冲区的大小，以便一次传输整个字符串。解决方案 import sys sys.getsizeof(s) # getsizeof(object, default) -> int...

2020-03-18 14:40:10 25 0

2020-03-18 14:29:11 110 0

原创 PyCharm设置每行最大长度限制

编写Python代码，大家都需要遵循PEP8，因此在pycharm中，如何设置每行最大长度限制，成为了一个小的知识盲点，在这里做一下记录，方便以后查看。 File→Settings→Code Style→Hard warp at 参考文章:https://blog.csdn.net/wei...

2020-03-18 10:39:47 77 0

转载推荐系统中相似度算法介绍及效果测试

###################### 尊重版权，转载注明地址 ###################### 相似度算法介绍相似度算法主要任务是衡量对象之间的相似程度，是信息检索、推荐系统、数据挖掘等的一个基础性计算。下面重点介绍几种比较常用的相似度算法。向量表示通常假设对象...

2020-03-06 16:58:47 85 0

转载 mysql left join 查询很慢，数据量不大

简单粘贴一下我的sql：同事告诉我，界面打开很慢，总共订单数据只有100多条，理论上不应该这么慢的，然后找到对应的sql语句，进行简单的分析，背景交代一下：mysql5.7，工具Navicat12 ，本人对mysql也就是属于可以用的层级分析的步骤： 1.先对sql做精简，测试几...

2020-01-19 10:54:01 124 0

转载利用正则表达式，去除python文件中所有注释

简介有时候代码的注释写的太多，反而影响对程序的理解手动删除所有注释代码，又过于麻烦所以基于文件读写，异常处理，正则字符串等知识写了这么个小程序程序特点在任意位置终端（cmd）中运行此程序，将需要删除注释的.py文件，拖拽到终端窗口中。都可以在源文件路径下，生成无注释版本的文...

2020-01-19 10:03:15 132 0

转载第 0007 题：有个目录，里面是你自己写过的程序，统计一下你写过多少行代码。包括空行和注释，但是要分别列出来。

import os # os 模块用来处理文件夹及文件目录 import string import re num_code = 0 num_empty = 0 num_note = 0 os.chdir('E:\python\wenjian\ex-2') # os.chd...

2020-01-19 10:00:17 135 0

转载多个经纬度地点数据，如何同时在地图上标注出来（路径显示）

2020-01-18 15:00:45 622 0

转载 mysql 中 replace into 与 insert into on duplicate key update 的使用和不同点

replace into和insert into on duplicate key update都是为了解决我们平时的一个问题就是如果数据库中存在了该条记录，就更新记录中的数据，没有，则添加记录。我们创建一个测试表test 1 2 3 4 5 ...

2020-01-18 10:00:51 53 0

转载百度地图开放平台轻量路径规划

背景由于要做等时圈研究，手头上有一些poi数据，如小区地理位置信息，地铁站点的地理位置信息，想通过等时圈把两者连接起来，如不同站点的关于小区的等时圈，这就需要时间数据，多方对比发现百度地图开放平台的轻量路径规划能够很好解决这个问题。思路比如要给图中绿色三角形找一些等时圈，直接构造等时圈太...

2020-01-16 20:05:01 138 0

转载清华毕业生开发新特效编程语言，99行代码实现《冰雪奇缘》，网友：大神碉堡！创世的快乐

只用99行代码，你也可以像《冰雪奇缘》里的艾莎公主一样拥有冰雪魔法。虽然你不能在现实世界中肆意变出魔法，但却能在计算机的虚拟世界挥洒特效。或许你不知道，电影和动画中特效有时仅仅短短的一秒，却可能需要高性能计算机演算一周，花费惊人。《冰雪奇缘》没有真人出演，预算却高达1.5亿美元，每一...

2020-01-16 19:29:31 198 0

转载 Python学习笔记：TypeError: not all arguments converted during string formatting 解决

问题 TypeError: not all arguments converted during string formatting 举例例如: strs=(1,2,3,4) #创建一个集合 strs (1, 2, 3,4) >>> print 'strs= %s...

2020-01-08 11:27:52 90 0

转载 superset常见问题

目录我可以一次查询/联接多个表吗？我的数据源能有多大？如何创建自己的可视化？我可以上传和可视化csv数据吗？为什么我的查询超时了？为什么地图在地图框可视化中不可见？如何向仪表板添加动态筛选器？如何限制仪表板上的定时刷新？为什么“flask fab”或supe...

2020-01-07 17:01:57 594 0

转载 pandas使用get_dummies进行one-hot编码

离散特征的编码分为两种情况： 1、离散特征的取值之间没有大小的意义，比如color：[red,blue],那么就使用one-hot编码 2、离散特征的取值有大小的意义，比如size:[X,XL,XXL],那么就使用数值的映射{X:1,XL:2,XXL:3} 使用pandas可以很方便的对离散...

2019-12-16 17:52:24 28 0

转载 pandas获取groupby分组里最大值所在的行方法

pandas获取groupby分组里最大值所在的行方法如下面这个DataFrame,按照Mt分组，取出Count最大的那行 ? 1 2 3 4 import pandas as pd df = pd.DataFrame({�...

2019-12-11 17:14:35 62 0

转载深度学习中的concatenate使用

1. 在numpy中concatenate使用 1.1 numpy.concatenate函数定义： numpy.concatenate((a1, a2, ...), axis=0, out=None) 1 Parameters: a1, a2, … : sequence of array_lik...

2019-12-04 10:01:13 77 0

转载机器学习 | 为什么softmax函数需要减去一个max值

背景：在softmax函数对vector值进行计算，转换为[0, 1]区间的概率值的时候，往往会先对vector中每个元素减去一个max(vector)值。本文主要记录下对神经网络学习中，关于softmax函数计算的track背后的原因。 Softmax函数介绍首先来看一下softma...

2019-12-03 16:38:25 138 0

转载 yolo3-tiny网络分析与加强（+MobileNet）

yolo3-tiny是yolo3的简化版本，主要区别为、主干网络采用一个7层conv+max网络提取特征（和darknet19类似），嫁接网络采用的是13*13、26*26的分辨率探测网络，结构如下。yolo3-tiny的优点主要是，网络简单，计算量较小，可以在移动端或设备端运行。缺点为精度也比较...

2019-12-03 16:27:32 432 0

转载 Java实现uint8_t/uint16_t/uint32_t

(转载请注明原文地址:http://blog.csdn.net/vector_yi/article/details/44648997) 在Java中，整数可以用byte,short,int和long等类型来表示，并不支持unsigned类型。然而在很多情况下Java也需要处理无符号类型，如翻译C/...

2019-12-03 16:01:16 140 0

转载 Error parsing message

2019-12-02 10:51:36 140 0

转载生产经营中常用的预测算法

常见的预测算法有： 1.简易平均法，包括几何平均法、算术平均法及加权平均法; 2.移动平均法，包括简单移动平均法和加权移动平均法; 3,指数平滑法，包括一次指数平滑法和二次指数平滑法，三次指数平滑法; 4,线性回归法，包括一元线性回归和二元线性回归，下面我一一的简单介绍一下各种方法。一，简易...

2019-11-25 16:37:29 48 0