左眼皮跳跳

to do what I want to do , to be what I want to be !

JAVA 注解

特别推荐这篇文章: https://blog.csdn.net/briblue/article/details/73824058 注解 声明 public @interface TestAnnotation { ...

2018-09-15 13:09:10

阅读数 43

评论数 0

Protocol buffer

  注意事项 第一行既不能是注释也不能是空行. 如果第一行不是 syntax="prpto3", 那么就是默认用 proto2 每一个属性有一个标号,范围是[1,2^29-1], 但是[19000,1...

2018-09-15 11:24:02

阅读数 45

评论数 0

HBase 1.2.5 put 源码分析

1. HTable 调用 put(final Put put) 方法,本地有一个缓存,不是每一次put就会提交到服务器端. @Override public void put(final Put put) throws IOException { getBufferedMuta...

2018-07-30 16:24:00

阅读数 209

评论数 0

Zookeeper 集群搭建

1. 从Zookeeper 官网下载zookeeper tar 包 https://www.apache.org/dyn/closer.cgi/zookeeper/ 图一: 图②: 注意: 1. 在DataDir 下创建一个文件myid, 这个id是需要和service.id=ho...

2018-07-26 15:03:35

阅读数 45

评论数 0

LeetCode 650. 2 Keys Keyboard

650. 2 Keys Keyboard DescriptionHintsSubmissionsDiscussSolution Pick One Initially on a notepad only one character 'A' is present. You can perform...

2018-07-23 00:16:14

阅读数 69

评论数 0

Hadoop Mapreduce 统计hbase表的行数并且写入到另一张表格中

  1. 创建 maven 项目,将hbase-site.xml 放到resource 文件夹下. 2. 在pom.xml 目录运行 mvn package 打包得到 可运行的jar. 3. 在hbase 表格创建储存结果的表, 5. 在hadoop 中用 /opt/hadoop/bin/...

2018-07-19 20:34:21

阅读数 220

评论数 0

hadoop/hdfs QJM 笔记

 在hadoop hdfs 中有一个角色叫做 JournalNode, 作用是储存对hdfs修改的日志,如果NN挂掉,通过重新播放日志来恢复。在原来的模式下,这些日志文件都是放在active的NameNode(NN) 中,又starndy 的NN 定期来合并这些日志文件(压缩等待),然后将合并后的...

2018-07-03 19:42:28

阅读数 61

评论数 0

Java 线程池 Executors

参考链接:http://www.wuzesheng.com/?p=2485 pom.xml <dependencies> <dependency> &lt...

2018-07-03 17:48:46

阅读数 45

评论数 0

Java 序列化

Java 序列化有两种方式.1. 实现Serializable 接口// 1: implements serializable public class Person implements Serializable { int age; String name; trans...

2018-07-03 12:50:39

阅读数 53

评论数 0

HDU 5536 Chip Factory

#include <iostream> #include <cstdio> #include<algorithm> using namespace std; con...

2018-03-16 16:16:41

阅读数 63

评论数 0

HBase特征

Hbase是运行在Hadoop上的NoSQL数据库,它是一个分布式的和可扩展的大数据仓库,也就是说hbase能够利用HDFS的分布式处理模式,并从hadoop的MapReduce程序模型中获益。这意味着在一组商业硬件上存储许多具有数十亿行和上百万列的大表。除去Hadoop的优势,HBase本身就是...

2017-08-08 20:39:32

阅读数 224

评论数 0

HBase数据库检索性能优化策略

HBase 数据表介绍Hbase 数据库是一个基于分布式的、面向列的、主要用于非结构化数据存储用途的开源数据库。其设计思路来源于 Google 的非开源数据库”BigTable”。HDFS 为 hbase 提供底层存储支持,MapReduce 为其提供计算能力,ZooKeeper 为其提供协调服务...

2017-08-08 20:38:34

阅读数 267

评论数 0

HBase深入学习(2)

HBase读的实现通过前文的描述,我们知道在Hbase写时,相同Cell(RowKey/ColumnFamily/Column相同)并不保证在一起,甚至删除一个Cell也只是写入一个新的Cell,它含有Delete标记,而不一定将一个Cell真正删除了,因而这就引起了一个问题,如何实现读的问题?要...

2017-08-08 20:34:39

阅读数 197

评论数 0

HBase深入学习(1)

HBase架构组成Hbase采用Master/Slave架构搭建集群,它隶属于Hadoop生态系统,由一下类型节点组成:HMaster节点、HRegionServer节点、ZooKeeper集群,而在底层,它将数据存储于HDFS中,因而涉及到HDFS的NameNode、DataNode等,总体结构...

2017-08-08 20:31:15

阅读数 311

评论数 0

VMWARE 简单的操作

1、Centos7 关闭防火墙: systemctl stop firewalld.service #停止firewall systemctl disable firewalld.service #禁止firewall开机启动 2、修改localname有下面的两步: ①...

2017-07-22 09:51:34

阅读数 266

评论数 0

for your security, some settings are controlled by your system administrator (windows 10)

背景: 前几天用虚拟机,需要关闭windows下的防火墙,可是提示我for your security, some settings are controlled by your system administrator (windows 10) 经过漫长的探索,终于解决问题,记录一下,步骤如下:...

2017-07-05 09:44:48

阅读数 645

评论数 0

Python爬虫模拟登陆豆瓣

#-*- coding:utf-8 -*- import requests,re from PIL import Image class DoubanSpider(object): def __init__(self): self.session = requests....

2017-05-23 16:56:36

阅读数 266

评论数 0

python爬虫爬取斗图网上图片

#-*- coding:utf-8 -*- """ 最基础的python爬取图片的程序,目前在学习阶段,程序思路: ①首先得到网页上的图片的分类 ②根据图片的分类url,进入到相应的网页,得到这个分类的所有图片Url ③下载图片 """...

2017-05-23 11:53:50

阅读数 1405

评论数 0

基础的python抓取网站图片的例子

#-*- coding: utf-8 -*- import re import urllib import urllib2 import os class Spider: def downLoadImage(self, url, imageDirName): html =...

2017-05-12 16:34:01

阅读数 166

评论数 0

最基础的python抓取网站图片例子

# -*- coding: utf-8 -*- import re import urllib import urllib2 class Spider: def downLoad(self, url): html = self.getHtml(url) ...

2017-05-11 19:04:50

阅读数 197

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭