- 博客(21)
- 收藏
- 关注
RSS订阅转载 golang windows内存文件映射
windows下实现内存文件映射，golang实际是调用的windows api，和win32编程没神马区别。fd, err := syscall.Open("./111.csv", syscall.GENERIC_ALL, 0)defer syscall.Close(fd)fsize, err := syscall.Seek(fd, 0, 2)syscall.Seek...
2017-10-10 08:52:00
512
转载 Impala服务JVM崩溃问题
impala有三个核心服务 catalogd,statestored,impalad；这三个服务里面statestored用于跟踪另两个服务的活动状态，记录是否可用，没有用到java代码。在catalogd和impalad需要调用java代码，在测试中发现服务启动时异常 SIGBUS 。这个问题从网上找的了记录：https://issues.apache.org/jira...
2017-07-07 17:30:00
427
转载 Impala编译部署-6集群部署
集群部署如果多机采用虚拟机方便一点，可以在一台机器上配置完成后以此为模板创建其他虚拟机，否则就需要在每台机器上做一些重复的工作和检查。尽量借助一些运维工具以减轻工作量。以3主机集群介绍1.1 准备集群主机1.1.1 主机规划规划各主机的IP地址，主机名，每主机上要部署的服务。例如IP地址主机名Hadoop服务Imp...
2017-05-19 09:21:00
325
转载 Impala编译部署-5单机部署-2
1.1.1 Hadoop初始化mkdir -p /usr/local/hadoop/hdfs/namemkdir -p /usr/local/hadoop/hdfs/datamkdir /var/run/hdfs-sockets/source /etc/hadoop/hadoop-env.shhadoop namenode -format1.1.2 I...
2017-05-16 19:49:00
219
转载 Impala编译部署-5单机部署-1
1.1 文件拷贝将编译生成并复制的可执行文件，一起拷贝到本机某目录下，比如/root/impala21.2 操作系统1.2.1 安装JDK安装JDK。方法同编译部分。1.2.2 环境变量~/.bashrcexport JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.65-3.b17.el7.x86_6...
2017-05-16 19:47:00
279
转载 Impala编译部署-4
这一步的目的是将程序运行必须的文件拷贝出来，便于发布和部署使用，我只想测试kudu，这里只拷贝了kudu的库。/etc/default :准备放impala配置文件/etc/hadoop ：hadoop配置文件be ：impala运行文件lib64 ：impala运行依赖库hadoop ：hadoop运行文件dependency ：ja...
2017-05-16 19:40:00
511
转载 Impala编译部署-3
开始编译impala，这一步在下载文件上面耗时较长。注意：在执行编译之前，source ~/.bash_profile使环境变量生效#cd /root/impala#./buildall.sh -notests编译过程中需要下载各种依赖，耗时较长且如果网络不稳定会中断。在第一次编译时，如有网络中断则可以手动下载然后将文件拷贝到对应的目录，再继续编译...
2017-05-15 10:08:00
526
转载 Impala编译部署-2
选一台机器作为编译服务器。在开始impala编译之前需要操作系统安装编译依赖。1.1 操作系统磁盘预留20G空间1.1.1 挂载系统盘并设置为本地yum源挂载系统盘（设备为/dev/cdrom）mount -t auto /dev/cdrom /mnt在/etc/yum.repo.d/下创建文件 cdrom.repo，内容为 [cdrom]...
2017-05-15 09:56:00
251
转载 Impala编译部署-1
Impala是一种MPP SQL查询引擎，基于Hadoop平台构建（注：Impala运行在HDFS，或Amazon S3 分布式文件系统上），提供低延迟、高并发的查询。2013年5月发布,Cloudera公司主导开发。2015年12月成为Apache孵化项目。将记述Impala的编译过程，并使用编译生成的文件部署impala集群，连接kudu数据库验证功能。全部验证过程是在本机搭...
2017-05-15 09:30:00
212
转载 工作转向Kudu
会逐步把学习过程，系统管理和功能验证等的内容发布出来转载于:https://www.cnblogs.com/fangjx/p/6683162.html
2017-04-08 21:41:00
139
转载 因工作方向转换，不再做greenplum内容的更新。
因工作方向转换，不再做greenplum内容的更新。转载于:https://www.cnblogs.com/fangjx/p/6652172.html
2017-03-31 16:45:00
111
转载 Greenplum设置资源备注信息
参考文档http://www.glphp.com/statics/api/postgresql/files/sql-comment.htmlGP的comment信息都是存储在pg_description里面的。可以为每个数据库对象保存一个备注信息。 COMMENT命令可以增删改某个对象的备注。 增加修改都使用这个命令，COMMENT ON ROLE myname IS 'thi...
2017-03-14 17:14:00
259
转载 Greenplum表空间管理
在GP系统中有表空间(tablespace)和文件空间(filespace)的概念。有不同，在postgresq9.6中可以直接在创建表空间时指定路径。在系统初始化时，只有两个表空间pg_default和pg_gloal。这两个表空间都在文件空间pg_system下。select a.spcname,b.fsname from pg_tablespace a,pg...
2017-03-14 09:26:00
469
转载 学习Greenplum的资源授权
用户/角色在整个数据库实例中是全局的。用户和角色区别是用户默认有LOGIN权限，其他同。在系统初始化时有个预定的超级用户，操作系统用户名,比如gpadmin。每个数据库的逻辑结构对象都有一个所有者，所有者默认拥有所有权限，不需要重新赋予。删除和任意修改它的权利不能赋予别人，为所有者固有，不能被赋予或撤销。可以把操作该对象的权限赋予别人。授权和撤销授权 用命令...
2017-03-02 19:05:00
255
转载 Greenplum身份验证方式-Kerberos
记述验证Greenplum使用Kerberos做登录身份验证的过程略过kerberos服务端配置过程。基础环境（linux） 10.110.18.84 idap-server-84.idap.com 安装了所有kerberos服务 10.110.18.241 idap-241 gpdb master 10.110.18.67 ...
2017-02-14 09:41:00
397
转载 Greenplum身份验证方式-LDAP
本文记述Greenplum使用LDAP做身份验证的过程。略过搭建LDAP服务器部分gpdb master做设置 Gpdb master 实际是作为ldap客户端，需要安装 # yum install -y openldap-clients Gpdb创建数据库用户user4,并对testdb.test1表有权限。在LDAP服务器上向ldap中增加...
2017-02-14 09:02:00
158
转载 Greenplum身份验证方式-密码验证
基于密码的身份验证方式有两种：password 和 md5 ;Password是明文密码 md5是加密后的密码测试方法类似于基于IP的trust reject身份验证方式，但数据库连接参数 密码需要赋值。首先新建两个用户 user2 ，user3 创建用户及授权的命令 template1=#create us...
2017-02-14 08:45:00
892
转载 Greenplum身份验证方式- trust+reject
Greenplum身份验证和Postgresql是一样的。参考文档是gpdb 管理指南和postgresql 官网文档。主要的配置文件是master_directory下的pg_hba.conf和postgres.conf对配置在pg_hba.conf中的（IP、用户名、数据库名）组合无条件trust或reject。测试代码： 创建数据库连接 ...
2017-02-13 19:43:00
355
转载 java web error：Choose unique values for the 'webAppRootKey'
使用tomcat部署了两个app，发现始终有一个默认启动不起来。从tomcat日志中有了发现。日志信息：四月 19, 2016 9:09:55 上午 org.apache.catalina.core.StandardContext listenerStartSEVERE: Exception sending context initialized event to listene...
2016-04-19 10:15:00
168
转载 MAC下搭建SVN服务端
参考了网上同学的文档在MAC上搭建了SVN服务端。记录搭建过程。环境：Mac OS X 10.10.4Spring Tool Suite 3.5.11.首先创建个文件目录作为SVN存储路径，我这里用的/Users/user/svn/mycode/$svnadmin create /Users/user/svn/mycode/2.修改配置文件在/Use...
2016-04-07 10:46:00
82
转载 VC+ADO访问数据库发现进程句柄数增加
程序功能：实现了一个TCP Server端，接收到客户端连接后，新增一个单独的线程与客户端交互，中间有数据库操作，完成后线程关闭。实现方式是VC++，数据库访问采用的是ADO，数据库是Mariadb，odbc数据源， mysql-connector。最初的方式是每次数据库操作都是 新建ADO._Connection,打开链接，查询或提交，关闭链接 ；问题：结果发现...
2016-04-01 17:20:00
171
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人