排序:
默认
按更新时间
按访问量

JAVA中的反射机制和动态代理

反射,当时经常听他们说,自己也看过一些资料,也可能在设计模式中使用过,但是感觉对它没有一个较深入的了解,这次重新学习了一下,感觉还行吧!            一,先看一下反射的概念:               主要是指程序可以访问,检测和修改它本身状态或行为的一种能力,并能根据自身行...

2017-10-09 10:41:07

阅读数:713

评论数:0

Python-爬取小说文字内容(使用beautiful soup实现)

  Python-爬取小说文字内容(beautiful soup) 本次爬取的网站为[http://www.136book.com/][6],你可以在页面选择你想要爬取的小说。 文中代码使用Anaconda的Jupyter书写。 Beautiful Soup简介 官方解释: Beauti...

2018-10-10 18:00:03

阅读数:59

评论数:0

几种任务调度的 Java 实现方法与比较

前言 任务调度是指基于给定时间点,给定时间间隔或者给定执行次数自动执行任务。本文由浅入深介绍四种任务调度的 Java 实现: Timer ScheduledExecutor 开源工具包 Quartz 开源工具包 JCronTab 此外,为结合实现复杂的任务调度,本文还将介绍 Calend...

2018-10-10 17:32:56

阅读数:18

评论数:0

ORACLE MERGE INTO语句,unable to get a stable set of rows in the source tables报错解决

 ORACLE数据库,MERGE INTO语句,经常会出现  ORA-30926: unable to get a stable set of rows in the source tables   这个错误,如下图所示:          经检查,这个错误是由于数据来源表(即语句中,fr...

2018-10-09 10:01:47

阅读数:50

评论数:0

搭建MySQL高可用负载均衡集群

1、简介   使用MySQL时随着时间的增长,用户量以及数据量的逐渐增加,访问量更是剧增,最终将会使MySQL达到某个瓶颈,那么MySQL的性能将会大大降低。这一结果也不利于软件的推广。   那么如何跨过这个瓶颈,提高MySQL的并发量呢?方法有很多,分布式数据库、读写分离、高可用负载均衡、增...

2018-08-31 16:21:29

阅读数:58

评论数:0

MySQL高可用架构之MHA

简介: MHA(Master High Availability)目前在MySQL高可用方面是一个相对成熟的解决方案,它由日本DeNA公司youshimaton(现就职于Facebook公司)开发,是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中...

2018-08-31 16:15:26

阅读数:391

评论数:0

Heartbeat+DRBD+MySQL高可用方案

1.方案简介 本方案采用Heartbeat双机热备软件来保证数据库的高稳定性和连续性,数据的一致性由DRBD这个工具来保证。默认情况下只有一台mysql在工作,当主mysql服务器出现问题后,系统将自动切换到备机上继续提供服务,当主数据库修复完毕,又将服务切回继续由主mysql提供服务。 2....

2018-08-31 16:14:32

阅读数:149

评论数:0

MySQL Cluster搭建与测试

MySQL Cluster是一个基于NDB Cluster存储引擎的完整的分布式数据库系统。不仅仅具有高可用性,而且可以自动切分数据,冗余数据等高级功能。和Oracle Real Cluster Application不太一样的是,MySQL Cluster 是一个Share Nothing的架构...

2018-08-31 16:13:12

阅读数:37

评论数:0

MySQL 高可用架构之MMM

简介 MMM(Master-Master replication manager for MySQL)是一套支持双主故障切换和双主日常管理的脚本程序。MMM使用Perl语言开发,主要用来监控和管理MySQL Master-Master(双主)复制,虽然叫做双主复制,但是业务上同一时刻只允许对一个...

2018-08-31 16:11:19

阅读数:49

评论数:0

java API 访问带有Kerberos认证的HBase时window服务器的配置

首先第一步,是确定的代码运行在window服务器还是linux服务器下, 如果是window服务器下,首先要检测window服务器是否可以连接的通 hadoop平台的zk (2181端口) (telnet xxx.xxx.xxx.xxx 2181)确定连接无误的情况下,进行连接hbase服务器的验...

2018-08-30 18:04:55

阅读数:31

评论数:0

更换红旗Linux: Asianux的yum源为网易源

测试环境: Linux系统版本Asianux4_x64:Linux localhost.localdomain 2.6.32-279.2.1.el6.x86_64 #1 SMP Tue Aug 14 11:42:24 CST 2012 x86_64 x86_64 x86_64 GNU/Linux...

2018-08-22 16:38:55

阅读数:53

评论数:0

hive增加Update、Delete支持

一、配置hive-site.xml CDH版本先进入Hive配置页   选择高级,找到hive-site.xml 的 Hive 客户端高级配置代码段配置项   点击+号,增加如下配置项   hive.support.concurrency = true hive.enforce.bu...

2018-08-20 11:48:47

阅读数:92

评论数:0

CentOS命令修改系统时间同步

    使用CentOS,遇到本地时间对不上,直接敲命令:date -s "2017-10-21  15:15:15"是立即生效了,但是重启后,系统时间还是原来的。 修改了其一是没有办法奏效,必须两者都更改。 1.date                ...

2018-08-15 17:14:52

阅读数:36

评论数:0

linux实现ssh免密码登录

验证ssh远程登录,未作免密处理的两台机器,登录时,是需要输入密码的 本地系统执行 ssh-keygen -t rsa 命令,生成密钥文件 在相应的目录下查看生成的密钥文件,其中:id_rsa为私钥文件,id_rsa.pub为公钥文件 本地机器执...

2018-08-15 17:12:42

阅读数:42

评论数:0

HBase系列:利用SQL BulkLoad快速导入海量数据

HBase BulkLoad概述 直接用put命令将海量数据导入至HBase会耗费大量时间(HFile合并、Region分割等),而且用原生的put命令导入海量数据,会占用HRegionServer很多资源,HBase集群会变得压力山大,集群基本对外丧失写的能力。 其实HBase中数据以HFi...

2018-08-09 15:41:46

阅读数:37

评论数:0

Hbase通过BulkLoad的方式快速导入海量数据

HBase数据在HDFS下是如何存储的? HBase中每张Table在根目录(/HBase)下用一个文件夹存储,Table名为文件夹名,在Table文件夹下每个Region同样用一个文件夹存储,每个Region文件夹下的每个列族也用文件夹存储,而每个列族下存储的就是一些HFile文件,HFile...

2018-08-09 15:40:07

阅读数:42

评论数:0

Flink集群部署详细步骤

1.下载Flink压缩包 下载地址:http://flink.apache.org/downloads.html。 我集群环境是hadoop2.6,Scala2.11版本的,所以下载的是: flink-1.3.1-bin-hadoop26-scala_2.11.tgz。 2.解压 上传至...

2018-07-26 11:25:59

阅读数:350

评论数:0

Intellij IDEA 14.1.4 Scala开发环境搭建

主要内容 Intellij IDEA开发环境简介 Intellij IDEA Scala开发环境搭建 Intellij IDEA常见问题及解决方案 Intellij IDEA常用快捷键 1. Intellij IDEA开发环境简介 具体介绍请参见:http://baike.baidu.c...

2018-07-24 10:20:38

阅读数:45

评论数:0

mapreduce,自定义排序,分区,分组实现按照年份升序排序,温度降序排序

自定义类:     package myhadoop;   import java.io.DataInput; import java.io.DataOutput; import java.io.IOException;   import ...

2018-07-17 11:57:11

阅读数:275

评论数:0

hbase基于solr配置二级索引

一.概述 Hbase适用于大表的存储,通过单一的RowKey查询虽然能快速查询,但是对于复杂查询,尤其分页、查询总数等,实现方案浪费计算资源,所以可以针对hbase数据创建二级索引(Hbase Secondary Indexing),供复杂查询使用。 Solr是一个高性能,采用Ja...

2018-07-17 09:37:37

阅读数:85

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭