- 博客(70)
- 收藏
- 关注
RSS订阅转载 分布式爬虫系统
分布式爬虫系统一、架构二、原理 1.分布式原理： 利用scrapy-redis实现分布式，利用主从模式，把自己核心服务器称为master，用于跑爬虫程序的机器称为slave。我们知道，采用scrapy框架抓取网页，需要首先给定一些start_urls，爬虫首先访问start_urls里面的url，再根据具体逻辑对里面的元素、或者其他二级、三级页面进行抓取。而要实现分布式，...
2019-04-30 11:44:00
147
转载 Chrome插件
今天是无聊的一天。 但是还是发现了两个Chrome插件。 还是很好用。 第一个是广告的拦截，第二个是下载管理。 先是第一个——AdBlock 它真的真的巨管用。从此之后上csdn再也不用看广告了。 上边是拦截之前的，下边是拦截之后的，可以看右上角那个小红手，显示拦截的广告数，效果很明显。特别推荐。 而且他是良心免费，靠捐赠，emmmmmmm...
2019-04-30 10:59:00
46
转载 LeetCode题解-147 对链表进行插入排序 Medium
对链表进行插入排序。插入排序的动画演示如上。从第一个元素开始，该链表可以被认为已经部分排序（用黑色表示）。每次迭代时，从输入数据中移除一个元素（用红色表示），并原地将其插入到已排好序的链表中。插入排序算法：插入排序是迭代的，每次只移动一个元素，直到所有元素可以形成一个有序的输出列表。每次迭代中，插入排序只从输入数据中移除一个待排序的元素，找到它在序列中适当的位置，并将其插入。重复直到...
2019-04-30 09:15:00
48
转载 SHELL-收集Oracle已应用的PSU信息
1. 命令收集版本信息# 创建数据收集脚本文件OPER_FILE=${EXECUTE_ID}_oper.shif [[ "${OPER_USER}" = "${USER}" ]]; then echo "${PATCH_HOME}/opatch lsinventory > ${MODULE_OUT_DIR}/${OPER_USER}.info" > ${...
2019-04-29 21:30:00
45
转载 leetcode 54. Spiral Matrix 、59. Spiral Matrix II
54题是把二维数组安卓螺旋的顺序进行打印，59题是把1到n平方的数字按照螺旋的顺序进行放置54. Spiral Matrixstart表示的是每次一圈的开始，每次开始其实就是从(0,0)、(1,1)这种开始的。用endx、endy来表示每次转圈的x、y方向的终止位置，方便后面进行边界条件设置。注意：后面start < endx && start &...
2019-04-29 17:24:00
51
转载 MyEclipse 的智能提示设置 使开发写代码的速度更快
MyEclipse 是学习java 的人 最经常使用的IDE ，经常看到非常多人写代码的速度非常快。事实上他们大多数都使用了代码提示功能，代码提示有好有坏，好的方面就是使在项目开发中速度更快，不用去记那些较长的keyword。而坏的方面就是假设使用代码提示的时间较长，自己便...
2019-04-29 17:03:00
101
转载 未来-区块链-Aliyun：阿里云IoT - 所知不止于感知
ylbtech-未来-区块链-Aliyun：阿里云IoT- 所知不止于感知1.返回顶部 1、基础产品接入设备接入设备管理数据分析应用开发网络管理边缘计算设备认证安全运营AliOS Things特色行业合作城市制造生活园区人居农业物流...
2019-04-29 14:08:00
553
转载 CF900A 【Find Extra One】
直接统计y轴两边点的个数如果在一边点的个数<=1,那么就把这个点删去，cout<<"Yes"<<endl;否则cout<<"No"<<endl;代码：#include<bits/stdc++.h>using namespace std;int n;int x,y;int a1=0,a2...
2019-04-28 19:25:00
39
转载 第四次实训作业
1）私有属性：上月电表读数、本月电表读数2）构造方法：无参、2个参数3）成员方法：getXXX（）方法、setXXX（）方法4）成员方法：显示上月、本月电表读数² 第二步 编写测试类1）创建对象一：上月电表读数为1000，本月电表读数为1200。 要求：调用无参构造方法创建对象； 调用setXXX（）方法初始化对象； 假设每度电...
2019-04-27 15:07:00
69
转载 php设计模式
1、常见的设计模式：单例模式、工厂模式、观察者模式工厂模式：工厂模式，工厂方法或者类生成对象，而不是在代码中直接new。使用工厂模式，可以避免当改变某个类的名字或者方法之后，在调用这个类的所有的代码中都修改它的名字或者参数。优点： 1、一个调用者想创建一个对象，只要知道其名称就可以了。 2、扩展性高，如果想增加一个产品，只要扩展一个工厂类就可以...
2019-04-27 09:53:00
52
转载 Acoustic modelling from the signal domain using CNNs
3. Neural network architecture此处描述了在本文当中所使用的网络结构，和所提取的关键特征（key features）。首先，描述了两个新型的网络结构：the network-in-network nonlinearity和the statistics extraction layer（NIN非线性结构和统计信息提取层）。3.1 Network-in-Network ...
2019-04-26 21:33:00
104
转载 js写一个chrome 插件
访问网站的时候，最烦的就是一些弹窗和广告。于是，就想着能不能在访问特定网站的时候，执行一段js脚本，去除页面的广告。于是乎，好像 chrome 插件可以实现。这里，以 百度 的网站为例新建simple01 文件夹：内部文件结构如图：主要是 manifest.json的配置：{ "manifest_version":2, "version":"1.0.0"...
2019-04-25 19:37:00
343
转载 JAVA—流程
1顺序结构2判断结构（选择结构）2.1.1 if语句2.1.2 if--else2.1.3 if ...else if...else2.2.1 switch3. 循环结构（循环语句）3.1 for循环3.2 while循环3.3 do---while---breakco...
2019-04-25 10:13:00
43
转载 将IP转换为16进制，用于IPv4-IPv6
# --*-- coding: utf-8 --*--# create by xiaocaijiwhile 1: str_ip = input("input a IP:") list_ip = str_ip.split('.') if len(list_ip) < 4: print("error IP") x = 0 try: for...
2019-04-25 09:09:00
1396
转载 （android高仿系列）今日头条 --新闻阅读器 （二）
高仿今日头条 --- 第一篇：（android高仿系列）今日头条 --新闻阅读器 （一） 上次，已经完毕了头部新闻分类栏目的拖动效果。这篇文章是继续去完好APP 今日头条 这个新闻阅读器的其它功能。这次所实现的功能清单：1.通过SlidingMenu实现左右側拉菜单效果2...
2019-04-24 21:45:00
122
转载 Linux下Clamav 杀毒软件安装使用文档
一、安装Clamav杀毒工具0、安装Clamav需要的依赖包yum install libxml* openssl* -y1、创建clamav组groupadd clamav2、创建clamav用户useradd -g clamav clamav3、解压缩文件，得到clamav-0.100.2目录tar -zxvf clamav-0.100.2.tar.gz4、进入clamav-...
2019-04-24 19:01:00
240
转载 JPA--java操作数据库框架
1.JPA1.1.什么是JPAJPA是JPAJPA开发效率高，运行效率低 （2）JDBC开发效率低，运行效率高（更接近底层，代码繁琐） （3）JPA兼容各种数据库（方便移植） （4）JPA有内置缓存（性能在一定程度上有所优化） （5）JPA直接面向持久对象操作 （6）JPA不能干涉...
2019-04-24 12:19:00
36
转载 jmh源码解析-整体架构
我理解的jmh运行架构图生成字节码,字节码负责维护测试的状态和调用被测试的方法默认在fork的进程中进行测试,可以配置多个fork进程,以减少误差通过线程池,提交每个迭代的测试任务,任务执行后,收集结果信息4.打印结果信息我的思考如图所示左图.反射消耗的性能在测试代码之外,不会影响被测试方法执行右图,如果不生成字节码,则会引入反射的性能消耗转载于:https://www...
2019-04-23 20:59:00
163
转载 Qt 多线程 QTCpSocket 数据发送和接收问题
环境：Windows 7 x64 Qt5.11.1 MinGW 32 分别重载 QThread QTcpServer QTcpSocket，Socket 的初始化放入线程中执行，会导致线程无法触发信号，也无法发送数据， 解决方法：线程需要调用自己的 exec 事件循环，这样就可以触发信号，写数据的时候调用 flush ,就可以成功发送数据~转载于:https://www.cnbl...
2019-04-23 10:29:00
2534
转载 斐波纳契数列
斐波那契数列（Fibonacci sequence），又称黄金分割数列、因数学家列昂纳多·斐波那契（Leonardoda Fibonacci）以兔子繁殖为例子而引入，故又称为“兔子数列”，指的是这样一个数列：1、1、2、3、5、8、13、21、34、……在数学上，斐波纳契数列以如下被以递推的方法定义：F(1)=1，F(2)=1F(n)=F(n-1)+F(n-2)（n>...
2019-04-23 10:15:00
289
转载 windows 7 专业版 64位 无法安装.Net 4.7版本解决方案
什么暂停windows update，改文件夹，再恢复windows update等等方法都试了，不行之后就觉得这才是终极解决方案。不管你是win 7什么版本，你只需要下载安装对应系统的Windows 7 Service Pack 1安装包，这个安装时间有点长，安装完之后就可以安装.Net 4.7版本了安装的过程中可能还会出现以下这种问题已处理证书链，但是在不...
2019-04-23 09:36:00
507
转载 python数据结构-如何快速找到多个字典中的公共键
如何快速找到多个字典中的公共键问题举例统计每轮都进球的球员：第1轮{‘tom’:1, 'meixi':2}第2轮{‘coco’:3, 'meixi':4, 'marton':2}第3轮{'coco':2, 'meixi':1, 'david':1}for循环、列表解析和set交集from random import randint, sample...
2019-04-21 16:00:00
52
转载 Unity 子弹移动以及碰撞条件
一、子弹移动游戏物体移动最主要的是获取一个刚体组件，再对这个刚体组件添加一个向前的力；具体代码：public class BulletCtrl : MonoBehaviour{ public int damage = 20; public float speed = 1000.0F; void Start() { ...
2019-04-21 15:31:00
154
转载 codeforces 1064套题
a题：题意就是问，3个数字差多少可以构成三角形思路：两边之和大于第三遍#include<iostream>#include<algorithm>using namespace std;int a[10];int main(){ cin>>a[0]>>a[1]>>a[2]; sort(a,...
2019-04-20 18:30:00
88
转载 gcc使用及动静态库制作
一. GCC的使用1. GCC的编译过程（1）预处理（cpp）gcc -E（输出问价通常以 .i 结尾），将头文件展开，宏替换等操作；（2）编译器（gcc）gcc -S（输出问价以 .s 结尾）生成汇编代码；（3）汇编器（as）gcc -c（输出文件以 .o 结尾）将汇编编译成二进制文件；（4）连接器（ld）gcc，链接 lib 库生成可执行文件。执行过程如下（hell...
2019-04-20 16:07:00
172
转载 python 字典与json的区别
json：是一种数据格式，是纯字符串。可以被解析成Python的dict或者其他形式。dict：是一个完整的数据结构，是对Hash Table这一数据结构的一种实现，是一套从存储到提取都封装好了的方案。它使用内置的哈希函数来规划key对应value的存储位置，从而获得O（1）的数据读取速度。字典是一种数据结构，json是一种格式；字典有很多内置函数，有多种调用方法，而json是...
2019-04-19 16:26:00
40
转载 java的equals()与hashCode()以及包装类中的实现
1. hashcode 1.1hashcode来源 1.2 hashcode的形式 1.3 hashcode目的 1.4 hashcode规则 1.5 hashcode作用体现 1.6重写hashcode方法2. equals方法 2.1equals来源 2.2 equals目的 2.3 equals性质 2.4重写equal...
2019-04-19 15:14:00
83
转载 封装
引子从封装本身的意思去理解，封装就好像是拿来一个麻袋，把小猫，小狗，小王八，还有alex一起装进麻袋，然后把麻袋封上口子。照这种逻辑看，封装=‘隐藏’，这种理解是相当片面的先看如何隐藏在python中用双下划线开头的方式将属性隐藏起来（设置成私有的）#其实这仅仅这是一种变形操作#类中所有双下划线开头的名称如__x都会自动变形成：_类名__x的形式：class A: ...
2019-04-18 18:40:00
35
转载 mybatis接受mysql存储过程out的值
这是题目的实体类 private Integer id; private Integer type;//题型 单选，多选 private String category;//类型 数据字典配置 private String problem;//问题 private String choose1;//选择1 private ...
2019-04-18 18:08:00
242
转载 20.Add Two Numbers（两个链表的和）
Level： Medium题目描述：You are given two non-empty linked lists representing two non-negative integers. The digits are stored in reverse order and each of their nodes contain a single digit. Add the tw...
2019-04-18 10:13:00
67
转载 springboot集成phoenix+HBase环境搭建
在各位大神的帮助下，完成了环境的搭建。由于使用的IDE工具是IDE，创建的maven项目，所以首先，第一步就是导入坐标。 <parent> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-parent...
2019-04-18 09:38:00
984
转载 ELK学习笔记之logstash安装logstash-filter-multiline(在线离线安装)
0x00 概述ELK-logstash在搬运日志的时候会出现多行日志，普通的搬运会造成保存到ES中单条单条，很丑，而且不方便读取，logstash-filter-multiline可以解决该问题github地址：https://github.com/logstash-plugins/logstash-filter-multiline其他插件的地址：https://github.com/...
2019-04-17 20:31:00
381
转载 【Lucene4.8教程之六】QueryParser与Query子类：怎样生成Query对象
版权声明：本文为博主原创文章。转载请注明来自http://blog.csdn.net/jediael_lu/ https://blog.csdn.net/jediael_lu/article/details/33288793 ...
2019-04-17 14:50:00
105
转载 dcoker搭建wordpress
下载wordpress镜像docker pull wordpress创建wordpress容器docker run -d --name wordpress --link mysql:mysql -e WORDPRESS_DB_HOST=10.10.0.110:3309 -e WORDPRESS_DB_USER=root -e WORDPRESS_DB_PASSWORD...
2019-04-17 13:15:00
69
转载 (转载)python 命名.py 不能与模块相同，否则会报错
在学习python网页爬虫时，测试requests的post方法进行表单提交时，命名.py文件为requests.py 代码如下：import requestsparams={'firstname':'xing','lastname':'ming'}r=requests.post("http://pythonscraping.com/files/processing.php",data=p...
2019-04-16 18:51:00
88
转载 【LuoguP5289】[十二省联考2019] 皮配
题目链接题目描述略Sol一道背包问题首先暴力做法设 \(dp[i][j][k]\) 表示前 \(i\) 个城市的学校被分到第一阵营 \(j\) 人 第一门派 \(k\) 人的方案数。中间一个城市里的学校就再枚举是分到那个阵营然后01背包 dp 一下门派就行了。然后似乎就没有什么 dp 上的优化空间了。注意到 \(k=0\) 时，一个学校被分到一个阵营后，它能够贡献人数的门派不会受到...
2019-04-16 16:00:00
49
转载 题解 P5065 【[Ynoi2014]不归之人与望眼欲穿的人们】
出现了一篇跑得炒鸡慢的题解！noteskey无 fuck 说，好像就是整个数列分块然后合并区间...什么的吧对于每块内部就是算一下前缀信息、后缀信息（就是以 第一个点/最后一个点 为一个边界，不超过 log 个不同的 or 值所要到达的最 左/右 点）和中值信息（就是某种区间长度内能 or 出来的最大值）然后询问的时候从第一个块开始，向后先查询当前块与下一个块合并的答案，然后更新当前块w...
2019-04-16 12:35:00
189
转载 强大的 actuator 服务监控与管理
SpringBoot是为了简化Spring应用的创建、运行、调试、部署等一系列问题而诞生的产物，自动装配的特性让我们可以更好的关注业务本身而不是外部的XML配置，我们只需遵循规范，引入相关的依赖就可以轻易的搭建出一个 WEB 工程actuator是spring boot项目中非常强大一个功能，有助于对应用程序进行监视和管理，通过restful api请求来监管、审计、收集应用...
2019-04-16 10:06:00
81
转载 设置多个圆圈组件显示在地图上
vue2leaflet 在线实验参考：https://korigan.github.io/Vue2Leaflet/#/components/l-circle/设置多个同类型组件在地图上<template> <l-map style="height: 100%; width: 100%" :zoom="zoom" :center="center"&g...
2019-04-15 18:01:00
479
转载 线性回归预测PM2.5----台大李宏毅机器学习作业1(HW1)
一、作业说明 给定训练集train.csv，要求根据前9个小时的空气监测情况预测第10个小时的PM2.5含量。训练集介绍： (1)、CSV文件，包含台湾丰原地区240天的气象观测资料(取每个月前20天的数据做训练集，12月X20天=240天，每月后10天数据用于测试，对学生不可见); (2)、每天的监测时间点为0时，1时......到23时，共24个时间节点; (3)、...
2019-04-15 16:07:00
1347
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人