2019年04月_weixin_30945039

转载 python之爬虫（二）爬虫的原理

在上文中我们说了：爬虫就是请求网站并提取数据的自动化程序。其中请求，提取，自动化是爬虫的关键！下面我们分析爬虫的基本流程爬虫的基本流程发起请求通过HTTP库向目标站点发起请求，也就是发送一个Request，请求可以包含额外的header等信息，等待服务器响应获取响应内容如果服务器能正常响应，会得到一个Response，Response的内容便是所要获取的页面内容，类型可能是H...

2019-04-30 19:14:00 70

转载常用的排列、组合、阶乘函数 MATLAB

1、求n的阶乘，方法如下：a、factorial(n)b、gamma(n+1)c、v='n!'; vpa(v)2、求组合(数)，方法如下：a、combntns(x,m) 列举出从n个元素中取出m个元素的组合。其中，x是含有n个元素的向量。b、nchoosek(n,m) 从n各元素中取m个元素的所有组合数。nchoosek(x,m) 从向量x中取m个元素的组合3、求排列(数)，方法...

2019-04-30 16:24:00 178

转载网站的可扩性展架构

扩展性（Extensibility）- 指对现有系统影响最小的情况下，系统功能可持续扩展或提升的能力。表现在系统基础设施稳定不需要经常变更，应用之间较少依赖和耦合，对需求变更可以敏捷响应。它是系统架构设计层面的开闭原则（对扩展开放、对修改关闭），架构设计考虑未来功能扩展，当系统增加新功能时，不需要对现有系统的结构和代码进行修改。伸缩性（Scalability）- 指系统能够通过增加减少自身...

2019-04-30 14:04:00 50

阅读本文可以带着下面问题：1.HBase遇到问题，可以从几方面解决问题？2.HBase个别请求为什么很慢？你认为是什么原因？3.客户端读写请求为什么大量出错？该从哪方面来分析？4.大量服务端exception，一般原因是什么？5.系统越来越慢的原因是什么？6.Hbase数据写进去，为什么会没有了，可能的原因是什么？7. regionserver发生abort,遇到最多是什么情况？8.从哪些方面可以...

2019-04-29 15:25:00 89

转载创建一个dynamics 365 CRM online plugin (十) - Isolation mode or trust mode

Isolation Mode 也被称作为Plugin TrustCRM里面有两种plugin trust / isolation mode1. Full Trust　　只在OP系统中可使用,没有限制　　plugin 挂掉之后会影响到CRM服务器运行.　　可以访问服务器文件2. Partial Trust or Sandbox　　可在OP系统和online...

2019-04-28 21:48:00 102

转载第一阶段SCRUM冲刺08

今天我和队里的大佬一起研究了登陆功能和找回密码功能，在大佬的带领下我成功的完成了找回密码功能，明天我将开始进行头像上传功能。转载于:https://www.cnblogs.com/my---world/p/10926404.html...

2019-04-28 16:16:00 54

转载机器学习【六】支持向量机SVM——专治线性不可分

SVM原理线性可分与线性不可分线性可分线性不可分-------【无论用哪条直线都无法将女生情绪正确分类】SVM的核函数可以帮助我们：假设‘开心’是轻飘飘的，“不开心”是沉重的将三维视图还原成二维：刚利用“开心”“不开心”的重量差实现将二维数据变成三维的过程，称为将数据投射至高维空间，这正是核函数的功能在SVM中，用的最普遍的两种把数据投射到高维空间的...

2019-04-28 13:36:00 412

转载 TCP断开那些事

继上一篇后，我们再来看一下四次挥手的过程这里其实没有必要过多阐述，一张图胜过千言万语。与三次握手一样，四次挥手的过程中也有许多扩展问题。当然问的最多的还是：为什么要四次握手？为什么要等待2MSL的时间？这个问题没必要死记硬背，只需要了解全双工的工作机制就好。至于等待的2MSL(报文最大生存时间)，一是保证传输的信息已经到达，二是防止无法收到确认报文段而不能进入CL...

2019-04-27 14:24:00 78

转载 Java中goto和break、continue实现区别

goto 关键字很早就在程序设计语言中出现。事实上，goto 是汇编语言的程序控制结构的始祖：“若条件 A，则跳到这里；否则跳到那里”。若阅读由几乎所有编译器生成的汇编代码，就会发现程序控制里包含了许多跳转。然而，goto 是在源码的级别跳转的，所以招致了不好的声誉。若程序总是从一个地方跳到另一个地方，还有什么办法能识别代码的流程呢？随着 Edsger Dijkstra 著名的“Goto 有害”论...

2019-04-26 19:24:00 69

转载三维几何模板

1 //三维几何函数库 2 #include <math.h> 3 #define eps 1e-8 4 #define zero(x) (((x)>0?(x):-(x))<eps) 5 struct point3{double x,y,z;}; 6 struct line3{point3 a,b;}; 7 struct plan...

2019-04-25 20:20:00 141

转载 MariaDB快速批量插入数据的几种办法

前言当要向MariaDB中插入新的数据时，以下过程会影响插入所消耗的时间：(按时间消耗长短降序排序)将数据sync到磁盘上(它是事务结束的一部分)添加新的键值。索引越大，更新键值所消耗的时间就越长。检查外键约束(如果存在)。将行添加到存储引擎中。将待插入数据发送给服务器。下面介绍几种向表中快速插入数据的技术(按效率的提升程度降序排序)。1. 禁用索...

2019-04-25 17:23:00 891

转载 day-10初级函数

函数函数的定义函数：完成特定功能的代码块，作为一个整体，对其进行特定的命名，该名字就代表函数-- 现实中：很多问题要通过一些工具进行处理 => 可以将工具提前生产出来并命名=> 通过名字就可以找到工具 => 使用工具来解决问题函数的优点1. 避免代码的冗余2. 让程序代码结构更加清晰3. 让代码具有复用性，便于维护函数的四部分1. 函数名：使用该函数的...

2019-04-24 21:26:00 59

转载 windows 查看端口号被占用

netstat -ano |findstr 8088转载于:https://www.cnblogs.com/byronliu029/p/10569865.html

2019-04-24 01:06:00 63

转载在 Linux 虚拟机中手动安装 VMware Tools VMware Workstation Pro 14.0 共享文件夹

对于 Linux 虚拟机，您可以从命令行手动安装 VMware Tools。对于 Linux 的较高发行版，请使用集成的 open-vm-tools 版本。先决条件有关 open-vm-tools 的操作系统兼容性的详细信息，请参见《VMware 兼容性指南》，网址为https://www.vmware.com/resources/compatibility/search.p...

2019-04-23 23:35:00 147

转载管道及I/O重定向

管道及IO 重定向 > < >> <<计算机组成：运算器，控制器：CPU 存储器：RAM 输入/输出设备 I/O 程序：指令和数据控制器：指令运算器：存储器：地址总线：内存寻址数据总线：传输数据控制总线：控制指令寄存器： CPU暂时存储器系统设定：默认输出设备：...

2019-04-23 20:53:00 86

转载 Javascript 实现[网红] 时间轮盘

话不多说，先上图。成品链接大致效果如上图，接下来就开始制作吧。HTML部分：我们需要将容器旋转rotate使之以圆点为中心。怎么转呢，请看图。将同一级的容器用一个大的容器包裹起来，绝对定位。这时，所有的子容器会重合在一起。然后我们用360°去除以子容器个数，可以得到每个子容器的角度差，采用角度差来旋转每个容器。效果如图：我们可以看到...

2019-04-23 20:12:00 1370

转载内核中的 ACCESS_ONCE()

参考资料：　　https://blog.csdn.net/ganggexiongqi/article/details/24603363这个真特么玄学了。。。转载于:https://www.cnblogs.com/rivsidn/p/10519393.html

2019-04-23 17:46:00 351

转载 C#委托、事件、线程

这是几个简单的例子，但是实际的开发中委托还还只在反射时用到过，事件的话只自己做了一次，并且还是特意去用的，实际上可以不用。线程的话，因为需要，所以用的会多点，这里主要是WS上的线程。委托在前面的反射实例中，也有用到委托执行方法。这个例子是将一个方法或者委托实例作为另外一个函数的入参传递。至于有什么用，我现在还没用上。 private delegate void Dosth(strin...

2019-04-22 19:14:00 170

转载 SpringBoot使用Graylog日志收集

本文介绍SpringBoot如何使用Graylog日志收集。1.Graylog介绍Graylog是一个生产级别的日志收集系统，集成Mongo和Elasticsearch进行日志收集。其中Mongo用于存储Graylog的元数据信息和配置信息，ElasticSearch用于存储数据。架构图如下：生产环境配置图如下：2.安装Graylog在官方文档上推荐了很多种安装的方式，这里以d...

2019-04-22 17:00:00 83

转载微对象的初入（5）

随笔随笔，随心所欲，果然是要命，一些咚咚没有作说明，会出问题的。只能想到什么写点什么。这章节以及之前的章节，都是我辛苦一个一个文字敲出来的。包括所有代码。虽然没难度，但也辛苦的。+_+这些代码都是为内存模式存储微DB服务的，是最底层代码，可以轻松移植到LINUX下。至于再上一层的，我用C++实现的，时间问题，这里可能不会载入。这个咚咚，其实就是一个NOSQL，只是，我用了他，费点时间实...

2019-04-22 15:58:00 57

转载 python的车牌号的检测

自己总结一下，从网上找到的关于车牌号的识别的一些博文。https://www.jianshu.com/p/fcfbd3131b84 https://www.cnblogs.com/do-hardworking/p/9829151.htmlhttps://blog.csdn.net/wzh191920/article/details/79589506转载于:https://www...

2019-04-22 15:43:00 1395

转载 windows代码,传入文件名,遍历此目录下所有文件.

#include <windows.h>#include <vector>using namespace std;BOOL IterAtorFileSaveFile(IN LPWSTR pFindPath, OUT vector<wstring>& vSaveFile)//遍历文件,并且保存文件到vector容器当中.{ HANDLE...

2019-04-22 14:15:00 104

转载 hive参数配置及任务优化

一、hive常用参数0.常用参数--@Name:--@Description: --@Type:全量加载--@Author:-----@CreateDate:--@Target:--@SourceTable:--@ModifyBy:--@ModifyDate:--@ModifyDesc:--@Copyright --设置作业名set ma...

2019-04-22 08:52:00 339

转载桶排序

思路：将你要排序的数组的值作为桶数组的索引，桶数组索引所对的值等于排序数组中出现的次数。然后通过桶数组将值输出查看（桶排序的数组中无法出现小于0的数）package DataStruct.Sort;import java.util.Arrays;public class BarrelSort { public static void main(Stri...

2019-04-21 22:00:00 43

转载 recurrent model for visual attention

paper url: https://papers.nips.cc/paper/5542-recurrent-models-of-visual-attention.pdfyear: 2014abstract这篇文章出发点是如何减少图像相关任务的计算量, 提出通过使用 attention based RNN 模型建立序列模型(recurrent attention model, RAM), 每...

2019-04-21 17:41:00 111

转载 20175221 《Java程序设计》第8周学习总结

20175221《Java程序设计》第8周学习总结教材学习内容总结第十五章主要内容有：泛型、链表、堆栈、散列映射、树集以及树映射。泛型：声明：可以使用class名称<泛型列表>声明一个类特点：泛型类声明和创建对象时，类名后多了一对“<>。<>里面可以是类和接口优点：使用泛型时，不必进行强制类型转换链表定义...

2019-04-20 23:19:00 63

转载微软 workflow 工作流总结

1.状态机工作流(1)状态机工作流从state1 流转到 state2 到stateN(2) state中有执行状态和退出状态(3) 在进入下一个步骤(state1 到 state2)前,首先会判断进入下一个状态的条件,下面我把它叫做判断模块(4)在判断模块中,有三个生命周期:Trigger,Condition,Action(5)判断模块会先进入Trigger,执行初始化,...

2019-04-20 16:05:00 146

转载 python条件语句与基本数据结构（一）

　　7.条件语句　　　　　　如果1等于1，那么就输出欢迎进入第一会所，否则输出欢迎进入第二会所　　　　　　代码块　　　　　　"""　　　　　　if 条件：　　　　　　　print（'OK'）　　　　　　else ：　　　　　　　 print （'Error'）　　　　　　"''''　　　　　　　　　　　　1. if基本语句　　　　...

2019-04-20 15:00:00 166

转载 Jenkins 集成 SonarQube Scanner

1. 安装Jenkins下载安装包，这里我们下载war包https://jenkins.io/download/运行jenkins.war的方式有两种：第一种：将其放到tomcat中运行（放到webapps目录下，启动tomcat）第二种：直接执行java -jar jenkins.war --httpPort=8080https://jenkins.io/doc/...

2019-04-20 14:19:00 155

转载 dup与dup2

dup与dup2#include <unistd.h>int dup(int oldfd);/*oldfd: 要复制的文件描述符返回值: 新的文件描述符dup调用成功: 有两个文件描述符指向同一个文件返回值: 取最小的且没被占用的文件描述符*/int dup2(int oldfd, int newfd);/*文件描述符的重定向oldfd->hahane...

2019-04-19 21:50:00 63

转载解决在Vue项目中时常因为代码缩进导致页面报错的问题

前言如果我们初次使用vue-cli来构建单页SPA应用，在撸代码的过程中有可能会遇到这种因为代码缩进导致页面报错的问题，导致我们烦不胜烦。接下来我们就来看一看如何解决这个小问题。。。erro原因分析通过查看package.json文件我们可以发现，在文件中默认安装了eslint-loader模块，eslint-loader模块是目前相对比较流行的代码检测工具，可以检测书写的代码是否符合统...

2019-04-19 17:05:00 267

转载 Spring RestTemplate 中文乱码问题

1、原因　　由于RestTemplate的默认构造方法初始化的StringHttpMessageConverter的默认字符集是ISO-8859-1，所以导致RestTemplate请求的响应内容会出现中文乱码。2、解决方法　　springboot中@Bean配置的时候要把StringHttpMessageConverter编码改成UTF8格式。如下：@Bean pu...

2019-04-19 17:00:00 122

转载 idea打开dashboard

1.编辑workspace.xml文件，搜索 “RunDashboard” 节点2.在component节点下增加option<option name="configurationTypes"> <set> <option value="SpringBootApplicationConfigurationType" ...

2019-04-19 09:53:00 1398

转载 1086 就不告诉你（15 分)

#include <iostream>using namespace std;int arr[100] = {0};int main(){ int n, m, sum; cin >> n >> m; sum = n * m; if (sum == 0) cout << 0 &l...

2019-04-19 00:28:00 43

转载九九乘法表-for循环

1、打印在左上角#直角在左上方for i in range(9,0,-1): for j in range(1,10): if j <= i: print("{}*{}={}".format(i,j,i*j),end="\t") print()预览：2、打印在左下角#直角在左下方fo...

2019-04-18 22:57:00 97

转载 haystack(django的全文检索模块)

haystackhaystack是django开源的全文搜索框架全文检索:标题可以检索,内容也可以检索支持solr ,elasticsearch,whoosh1.注册app在setting.py的app中注册"haystack"2.指定用哪个引擎(solr,elasticsearch,whoosh)将配置文件放在setting文件中在你的`settings.py`中...

2019-04-18 19:50:00 128

转载 09.安装Collabora Online服务

安装Collabora Online服务参考博客：http://blog.sina.com.cn/s/blog_16b158be80102xp5u.html一、安装docker服务yum install -y yum-utilsyum install docker -ysystemctl enable dockersystemctl start dockerdocker ps...

2019-04-18 14:14:00 3568

转载 3DMath

线与面相交的计算https://zh.wikipedia.org/wiki/%E7%BA%BF%E9%9D%A2%E4%BA%A4%E7%82%B9什么是参数方程？参数是参变数的简称。它是研究运动等一类问题中产生的。质点运动时，它的位置必然与时间有关系，也就是说，质的坐标x，y与时间t之间有函数关系x＝f(t)，y＝g(t)，这两个函数式中的变量t，相对于表示质点的几何位置的变量x，y来说，...

2019-04-18 04:08:00 196

转载一篇年薪60万的JVM性能调优文章

JVM 调优概述性能定义吞吐量 - 指不考虑 GC 引起的停顿时间或内存消耗，垃圾收集器能支撑应用达到的最高性能指标。延迟 - 其度量标准是缩短由于垃圾啊收集引起的停顿时间或者完全消除因垃圾收集所引起的停顿，避免应用运行时发生抖动。内存占用 - 垃圾收集器流畅运行所需要的内存数量。调优原则GC 优化的两个目标：将进入老年代的对象数量降到最低减少 Full...

2019-04-17 17:30:00 96

转载 Linq to SQL -- Join

Join操作适用场景：在我们表关系中有一对一关系，一对多关系，多对多关系等。对各个表之间的关系，就用这些实现对多个表的操作。说明：在Join操作中，分别为Join(Join查询), SelectMany(Select一对多选择)和GroupJoin(分组Join查询)。该扩展方法对两个序列中键匹配的元素进行inner join操作SelectMany说明：我们在写查询语句时，...

2019-04-17 15:53:00 75

空空如也

空空如也