自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

大数据训练营

大数据训练营

  • 博客(42)
  • 资源 (17)
  • 论坛 (7)
  • 收藏
  • 关注

原创 mysql基本管理命令

select distinct concat('user:''',user,'''@''',host,''':') as query from mysql.user;查看所有的用户show grants for 'username'@'%';或者:select * from mysql.user where user='username';查看某个用户的权限/* 创建新数据库 hibernated

2014-06-26 16:53:13 6393

转载 hive的三种安装方式

Hive的meta数据支持以下三种存储方式,其中两种属于本地存储,一种为远端存储。远端存储比较适合生产环境。Hive官方wiki详细介绍了这三种方式,链接为:Hive Metastore。 一、本地derby这种方式是最简单的存储方式,只需要在hive-site.xml做如下配置便可[html] view plaincopyprint?

2014-06-26 16:47:49 7092

原创 查看用户的远程登录权限

1、登陆mysql数据库       mysql -u root -p   查看user表  www.2cto.com  mysql> use mysql;Database changedmysql> select host,user,password from user;+--------------+------+----------------

2014-06-26 15:51:54 6501

原创 为mysql用户配置远程登录的权限

Mysql默认关闭远程登录权限,如下操作允许用户在任意地点登录:1. 进入mysql,GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '' WITH GRANT OPTION;IDENTIFIED BY后跟的是密码,可设为空。2. FLUSH privileges; 更新grant al

2014-06-26 15:29:44 6659

原创 hive配置远程mysql做metadate数据库

在hive-site.xml中加入:   hive.metastore.local  true这是本地  false这是远程  controls whether to connect to remove metastore server or open a new metastore server in Hive Client JVM

2014-06-26 15:19:25 6618

原创 hive使用mysql做元数据库,以及一些问题处理

Hive集成Mysql作为元数据默认情况下,Hive元数据保存在内嵌的 Derby 数据库中,只能允许一个会话连接,只适合简单的测试。为了支持多用户多会话,则需要一个独立的元数据库,我们使用 MySQL 作为元数据库,Hive 内部对 MySQL 提供了很好的支持,配置一个独立的元数据库需要增加以下几步骤:第一步:安装MySQL服务器端和MySQL客户端,并启动My

2014-06-26 15:07:23 7164

转载 hive的日志分类和存储位置

日志记录了程序运行的过程,是一种查找问题的利器。Hive中的日志分为两种1. 系统日志,记录了hive的运行情况,错误状况。2. Job 日志,记录了Hive 中job的执行的历史过程。系统日志存储在什么地方呢 ?在hive/conf/ hive-log4j.properties 文件中记录了Hive日志的存储情况,默认的存储情况:hive.root.log

2014-06-26 15:02:46 7216

转载 protobuf简介

protobuf简介~~~~~~~~~~~~1. protobuf是什么?protobuf是google出的一个结构化信息传递的工具,用于传递自定的strcut xxx {}内容。可用于在一个机器上的进程间,两台设备各自的进程间,等等。2. protobuf如何用?利用protobuf会生成protobuf编码器和protobuf解码器,两者都依赖protobuf库。a. 使用proto语言写st

2014-06-26 14:17:11 6897

原创 mysql rpm安装配置

注:安装前要卸载与mysql相关的依赖包#rpm –qa|grep mysql 或#rpm -qa|grep MySQL#rpm -e --nodeps  mysql-libs-5.1.61-4.el6.x86_64安装:#包去I:\desktop\软件\开源大数据软件  下找#rpm -ivh MySQL-server-5.6.12-1.el6.i686.rpm#rp

2014-06-25 16:42:38 6333

原创 hbase分页代码实现完整版,包括建表,生成数据,分页

建表和生成数据:package youling.studio.page;import java.io.IOException;import java.util.ArrayList;import java.util.List;import java.util.Random;import org.apache.hadoop.conf.Configuration;

2014-06-25 15:34:41 7345 2

转载 java操作hbase

HBaseConfiguration是每一个hbase client都会使用到的对象,它代表的是HBase配置信息。它有两种构造方式:public HBaseConfiguration()public HBaseConfiguration(final Configuration c)默认的构造方式会尝试从hbase-default.xml和hbase-site.xml中读取

2014-06-24 16:54:22 6318

转载 hbase基本的api

几个相关类与HBase数据模型之间的对应关系java类 HBase数据模型HBaseAdmin 数据库(DataBase)HBaseConfigurationHTable 表(Table)HTableDescriptor 列族(Column Family)Put 列修饰符(Column Qualifier)GetScanner 一、HBaseConfiguration关系:org.apache.h

2014-06-24 16:53:07 6591

转载 分布式缓存memcached原理

分布式缓存出于如下考虑,首先是缓存本身的水平线性扩展问题,其次是缓存大并发下的本身的性能问题,再次避免缓存的单点故障问题(多副本和副本一致性)。分布式缓存的核心技术包括首先是内存本身的管理问题,包括了内存的分配,管理和回收机制。其次是分布式管理和分布式算法,其次是缓存键值管理和路由。原文:http://wenku.baidu.com/view/8686d46c7e21af45b307a8c

2014-06-24 11:21:43 7051

转载 hbase定期备份,增量和完全备份

如何使用HBase的Export与Import完成备份功能,请参照我之前的博文《HBase 增量备份》。转载一份使用Export与Import定期备份的Python代码。每月15日做一次完整备份,每天进行一次增量备份。[python] view plaincopyprint?import time    import date

2014-06-23 17:21:53 9971

转载 hbase条件查询实现理论

Author:Pirate LeomyBlog: http://blog.csdn.net/pirateleo/myEmail: codeevoship@gmail.com转载请注明出处,谢谢。文中可能涉及到的API:Hadoop/HDFS:http://hadoop.apache.org/common/docs/current/api/HBase: http://hbase.apache.org

2014-06-23 16:57:11 6971

转载 hbase解决海量图片存储

随着互联网、云计算及大数据等信息技术的发展,越来越多的应用依赖于对海量数据的存储和处理,如智能监控、电子商务、地理信息等,这些应用都需要对海量图片的存储和检索。由于图片大多是小文件(80%大小在数MB以内),以GFS、HDFS为代表的适用于流式访问大文件的分布式存储系统,若直接用来存储图片,由于元数据膨胀,在扩展性和性能方面均存在严重问题。    为了解决HDFS在小文件存储方面的问题,通

2014-06-23 16:04:19 30116 2

原创 hbase完全分布式安装+hbase shell的基本使用方法

本文开始之前先进行一下hadoop2.2的安装,推荐文章地址:http://blog.csdn.net/u010670689/article/details/30495989 去apache官网下载 hbase-0.96.0-hadoop2-bin.tar.gz  解压到/cloud目录下进入目录/cloud/hbase-0.96.1.1-hadoop21.cd 到/home/

2014-06-23 14:47:21 8060

转载 hbase filter 编程使用详解

[java] view plaincopy本博客是hbase使用filter快速高效查询的方法,我会慢慢补齐  几大Filters1、Comparision Filters     1.1  RowFilter1.2 FamilyFilter     1.3 QualifierFilter     1.4 ValueFilter 

2014-06-23 14:03:33 6819

转载 hbase中强制删除表

因为集群硬盘紧俏,绝对对原来的表加上COMPRESSION=>LZO属性。但是创建表,长时间没有反馈。决定drop掉这张表,但是始终drop失败。重启集群,hbase 60010界面显示有region transaction。为创建失败的表region,在PENDING_OPEN和CLOSED之间跳。describe 表失败, enable表失败,disable表失败,从60010界面查看表失败。

2014-06-23 10:38:05 7414

转载 hbase架构介绍

1.HBase简介HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase是Google Bigtable的开源实现,类似Google Bigtable利用GFS作为其文件存储系统,HBase利用Hadoop HDFS作为其文件存储系统;Google运

2014-06-22 21:08:22 6459

转载 低成本和高性能的MySQL云数据库的实现

UMP(Unified MySQL Platform)系统是淘宝核心系统数据库团队开发的低成本和高性能的MySQL云数据方案,关键模块采用Erlang语言实现。系统中包含了controller服务器、proxy服务器、agent服务器、API/Web服务器、日志分析服务器、信息统计服务器等组件,并且依赖于Mnesia、LVS、RabbitMQ、ZooKeeper等开源组件。      在“

2014-06-22 10:19:41 6843

原创 hbase中两张特殊的表,-ROOT-和.META.

当Table随着记录数不断增加而变大后,会逐渐分裂成多份splits,成为regions,一个region由[startkey,endkey)表示,不同的region会被Master分配给相应的RegionServer进行管理:3.3 -ROOT- && .META. TableHBase中有两张特殊的Table,-ROOT-和.META.Ø  .META.:记录了

2014-06-21 22:46:59 9250

原创 centos给用户添加sudo权限

linux给用户添加sudo权限: 有时候,linux下面运行sudo命令,会提示类似: xxxis not in the sudoers file.  This incident will be reported. 这里,xxx是用户名称,然后导致无法执行sudo命令,这时候,如下解决:1进入超级用户模式。也就是输入"su -",系统会让你输入超级用户密码,输入密码后就进

2014-06-21 22:00:03 8965

转载 linux查看和修改系统时间和时区

一、查看和修改Linux的时区1. 查看当前时区命令 : "date -R"2. 修改设置Linux服务器时区方法 A命令 : "tzselect"方法 B 仅限于RedHat Linux 和 CentOS命令 : "timeconfig"方法 C 适用于Debian命令 : "dpkg-reconfigure tzdata"

2014-06-21 21:58:04 7399

原创 centos6.4hadoop2.2使用lzo压缩配置和测试

如有疑问关注新浪微博: http://weibo.com/youlingR   或者qq:946578327资料下载地址: http://pan.baidu.com/s/1sj4SbwxHadoop中常用的压缩算法有bzip2、gzip、lzo、snappy,其中lzo、snappy需要操作系统安装native库才可以支持

2014-06-21 21:56:49 7186

原创 hadoop balancer 平衡hdfs文件块分布

在要balance的slave执行:start-balancer.sh -threshold 10% 或者 start-balancer.sh -t 10%或 ./hadoop balancer -threshold 10 或者 ./hadoop balancer -threshold 10  由于hadoop集群的机器磁盘容量大小不等,造成磁盘使用率不同,

2014-06-21 21:40:42 10770

转载 centos Linux 正确识别cpu的个数和核数

判断依据: 1.具有相同core id的cpu是同一个core的超线程。 2.具有相同physical id的cpu是同一颗cpu封装的线程或者cores。 英文版: 1.Physical id and core id are not necessarily consecutive but they are unique. Any cpu with the same core

2014-06-17 17:10:51 9199

原创 linux下ls 列出所有目录和文件

find  $PWD | xargs ls -ld *.jar |grep snappy*.jar表示

2014-06-17 13:28:36 8056

原创 设计模式-生产者与消费者Java实现

对于多线程程序来说,不管任何编程语言,生产者和消费者模型都是最经典的。就像学习每一门编程语言一样,Hello World!都是最经典的例子。  实际上,准确说应该是“生产者-消费者-仓储”模型,离开了仓储,生产者消费者模型就显得没有说服力了。  对于此模型,应该明确一下几点:  1、生产者仅仅在仓储未满时候生产,仓满则停止生产。  2、消费者仅仅在仓储有产品时候才能消费,仓空则等待

2014-06-14 22:05:34 6495

原创 实验四 稀疏距阵的压缩存储

#include #define M 20 #define N 20 float  A[M][N]; float  B[M][N]; float  C[M][N]; int i,j,m,n,p,q,k; float  y=1.0; void add(){printf("请输入矩阵A的行数和列数(用逗号隔开):"); scanf("%d,%d",&i,&j);

2014-06-14 16:43:17 6548

原创 visualC++6.0如何调试程序

编译后按F10,(F10逐行执行),当提示输入时按规定输入数据,继续按F10,当遇到函数调用时按F11(F11进入函数体)

2014-06-14 09:55:46 7952

原创 二叉树的先,中,后遍历方法

a / \ b c /\ / e f g

2014-06-14 09:20:50 6497

原创 hadoop2.2.0+zookeeper+高可用+完全分布式

1.节点准备三个节点:master 192.168.1.150namenode,resourcemanager,datanode,nodemanager,zookeeper,journalnode,dfszkfailovercontrollerslave1 192.168.1.151namenode,datanode,nodemanager,zookeeper,journaln

2014-06-13 16:13:16 7126

原创 linux下maven安装配置

maven官方下载地址,可以选择源码编码安装,这里就直接下载编译好的 就可以了wget http://mirror.bit.edu.cn/apache/maven/maven-3/3.1.1/binaries/apache-maven-3.1.1-bin.zip解压文件后,同样在/etc/profie里配置环境变量export MAVEN_HOME=/o

2014-06-13 10:50:05 6506

转载 Apache spark简介

http://blog.csdn.net/colorant/article/details/8255910==是什么 ==目标Scope(解决什么问题)在大规模的特定数据集上的迭代运算或重复查询检索官方定义aMapReduce-like cluster computing framework designed for low-latency it

2014-06-12 22:36:00 7435

转载 JDK8 十大新特性

本教程将用带注释的简单代码来描述新特性,你将看不到大片吓人的文字。一、接口的默认方法Java 8允许我们给接口添加一个非抽象的方法实现,只需要使用 default关键字即可,这个特征又叫做扩展方法,示例如下:复制代码 代码如下:interface Formula {    double calculate(int a);    def

2014-06-12 22:33:41 8542

原创 给普通linux用户配置sudo的权限

linux给用户添加sudo权限: 有时候,linux下面运行sudo命令,会提示类似: xxxis not in the sudoers file.  This incident will be reported. 这里,xxx是用户名称,然后导致无法执行sudo命令,这时候,如下解决:进入超级用户模式。也就是输入"su -",系统会让你输入超级用户密码,输入密码后就进入

2014-06-12 14:56:35 6340

转载 linux yum命令详解

yum提供了查找、安装、删除某一个、一组甚至全部软件包的命令,而且命令简洁而又好记。yum的命令形式一般是如下:yum [options] [command] [package ...]其中的[options]是可选的,选项包括-h(帮助),-y(当安装过程提示选择全部为"yes"),-q(不显示安装的过程)等等。[command]为所要进行的操作,[package ...]是操作的对

2014-06-12 09:11:25 6358

原创 linux下载文件

wget http://apache.claz.org/zookeeper/zookeeper-3.4.5/zookeeper-3.4.5.tar.gz下载到当前文件夹下面

2014-06-10 13:26:12 6308

转载 linux关闭屏保

关闭屏保,此命令执行后就不影响观看了[searu@linux ~]$ setterm -blank 02设置屏保为1分钟,若想多设置修改这个设置即可[searu@linux ~]$ setterm -blank 13关闭、打开光标[searu@linux ~]$ setterm -cursor on|off

2014-06-10 11:04:47 6517

酒店管理系统-毕业设计

酒店管理系统毕业设计,基本的功能,免费下载喔

2014-05-12

MahoutInAction中文版啦word版

MahoutInAction中文版啦word版 免费的喔

2014-03-22

hbase-0.90.5下载

hbase-0.90.5.tar.gz 分布式列式数据库 基于hadoop 的hdfs文件系统 hbase-0.90.5.tar.gz下载

2013-09-30

dotnetFx4.0fullx86x64

.net4.0框架

2013-09-30

hadoop-0.20.2.tar.gz下载

hadoop-0.20.2.tar.gz下载

2013-09-30

AjaxControlToolkit.Binary.NET4官网完整版

AjaxControlToolkit.Binary.NET4 官网完整版 免费下载 《幽灵工作室》提供

2013-06-20

oracle 10g SQL Reference

oracle 10g SQL Reference

2013-05-14

C#语言c/结构酒店管理系统_幽灵工作室提供

本系统是c/s结构的酒店管理系统 提供了系统的源码,图片,还有数据库文件 详细: 项目名称:酒店管理系统 开发方式:个人开发 开发环境:Windows 7 开发工具:Visual Studio 2010 SqlServer Management Studio 开发技术:WinForm应用系统开发 项目结构:C –S结构 数据库:SqlServer 2008 开发技术:C#、WinForm、ADO.NET 开发周期:两周,按时完成 项目描述:项目整体分为权限模块,普通用户模块和管理员模块。1.权限模块的数据库中有用户表和角色表,权限模块有用户登陆,用户修改密码,用户修改角色,用户的添加和删除功能。2.普通用户模块的数据库中有客户表和客户类型的表,普通用户模块有房间入住信息管理,可以管理房间状态,管理房间入住信息,有客户入住信息管理,可以查看入住客户信息,筛选入住客户信息,给具体某个客户增加消费,以房间为单位给用户结账。3.管理员模块的数据库中有房间表,楼层表,房间类型表,房间状态表,管理员模块具有房间信息管理,楼层信息管理,房间状态信息管理,房间类型信息管理,可以对房间,房间状态,房间类型,楼层进行增删改查,还具有修改用户角色和用户密码,添加用户的功能。

2013-05-12

consul_1.6.1_darwin_amd64.zip

consul_1.6.1_darwin_amd64.zip for mac

2019-09-26

SonarLint-3.5-for-intellj-idea-亲测好使.zip

SonarLint-3.5-for-intellj-idea-亲测好使 解压,直接打开idea的preferences,选择plugins,选择下面的install plugin form disk,选择文件SonarLint-3.5.1.2759.zip,完成安装即可

2019-08-09

spark-2.3.3-bin-hadoop2.6.tgz

spark-2.3.3-bin-hadoop2.6.tgz

2019-07-05

spark-2.3.3-bin-hadoop2.6.tgz

spark-2.3.3-bin-hadoop2.6.tgz

2019-07-05

geckodriver-v0.24.0-macos火狐插件

geckodriver-v0.24.0-macos火狐插件,帮助selenium

2019-04-05

draw.io mac版 非常好用的画图软件

draw.io非常好用的画图软件 支持各种图 mac版本 非常好

2019-01-21

mac jd-gui.app版本jd-gui-osx-1.4.0

mac jd-gui.app版本jd-gui-osx-1.4.0 亲自测试 可以使用的

2019-01-21

avro-tool-1.7.4.jar下载

avro-tool-1.7.4.jar下载,avro下载,国内下载超级慢啦

2017-03-13

openstack超级源码

openstack超级源码

2015-01-15

rolin-刘瑞的留言板

发表于 2020-01-02 最后回复 2020-01-02

asp.net中的Newtonsoft.Json.dll 是干什么的呀

发表于 2013-05-29 最后回复 2015-04-20

c#连接oracle数据库时执行更新操作无效?

发表于 2013-05-27 最后回复 2013-10-26

哪里有asp.net的PI-SDK下载呀?

发表于 2013-07-31 最后回复 2013-07-31

.net framework 3.5下开发的项目向.net framework 4.0下移植出现错误

发表于 2013-07-01 最后回复 2013-07-11

vs2010调试的时候出现service unavailable提示,部署后就不提示了

发表于 2013-07-01 最后回复 2013-07-01

C#连接oracle时,无法引用using system.data.oracleclient,在项目的引用上添加引用的时候,也是找不到这个引用

发表于 2013-05-26 最后回复 2013-05-26

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人 TA的粉丝

提示
确定要删除当前文章?
取消 删除