linux
文章平均质量分 55
textboy
专注于技术与管理并行发展
展开
-
linux下Java_home设置
(1)vi /etc/profile#javaexport JAVA_HOME=/usr/java/jdk1.7.0_17export PATH=$JAVA_HOME/bin:$PATHexport CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar(2)立即生效source /etc/profi原创 2015-05-15 10:59:40 · 939 阅读 · 0 评论 -
虚拟机下实现:固定ip+能上网+主机虚拟机互连
一、设置VMware 在vmware的【编辑】-->【虚拟网络编辑器】设置:将VMnet0设置为“桥接”,并桥接到宿主机器的网卡(可以是有线或者无线网络)。二、设置虚拟机系统(以centos为例) 将网路适配器设置为桥接三、配置IP(都是在命令界面中,图形界面同理) 1、编辑/etc/sysconfig/netwo原创 2015-05-18 17:17:18 · 4620 阅读 · 0 评论 -
Linux下安装MySql(多实例+主备)
一、多实例安装groupadd mysqluseradd -r -g mysql mysqlmkdir /usr/local/mysqltar -xvf mysql-5.6.26-linux-glibc2.5-x86_64.tar.gz -C /usr/local/mysqlcd /usr/local/mysqlchown -R mysql:mysql .//usr原创 2016-02-01 14:57:10 · 1288 阅读 · 0 评论 -
ZooKeeper 安装、配置
单机安装、配置: 安装非常简单,只要获取到 Zookeeper 的压缩包并解压到某个目录如:/home/frank/ZooKeeperInstall/zookeeper-3.3.3下。 配置文件存放在/conf/目录下,将zoo_sample.cfd文件名称改为zoo.cfg, 缺省的配置内容如下: # The number of millisecond转载 2016-04-15 18:39:24 · 473 阅读 · 0 评论 -
hive安装 (hive1.2.1+hadoop2.7+mysql)
1. 下载解压cd /mk/softtar -xvzf apache-hive-1.2.1-bin.tar.gz -C /appl/cd /applmv apache-hive-1.2.1-bin hive-1.2.12. 配置环境变量vi /etc/profileexport HIVE_HOME=/appl/hive-1.2.1export PATH=$PATH:$HIVE原创 2016-08-29 18:11:55 · 3196 阅读 · 0 评论 -
配置spark令其支持hive
确保scala版本Spark1.4搭配Scala 2.10Spark1.6搭配Scala 2.10Spark2.0搭配Scala 2.11查看libHive需要三个jar包,分别是datanucleus-api-jdo-3.2.6.jar、datanucleus-core-3.2.10.jar、datanucleus-rdbms-3.2.9.jar,如果已经有了就不需要重新原创 2016-08-31 11:17:04 · 2865 阅读 · 0 评论 -
调度工具:Airflow
Airflow安装airflow对python-devel、numpy等版本有一定的要求,想减少麻烦可参考:《Install Python 2/3 on CentOS 6.5 Server》python搞掂了,airflow安装其实很简单pip install airflowpip install airflow[mysql]airflow initdbairflo原创 2016-09-01 16:27:51 · 1784 阅读 · 0 评论 -
简单安装Mysql(linux centos)
之前写了几篇mysql多实例或主备安装文章,但由于实验需要,反而要一个快速简单部署的mysql,so mark如下:--------------------rm /appl/mysql/data/dbdatascripts/mysql_install_db --user=root --basedir=/appl/mysql --datadir=/appl/mysql/data/dbda原创 2016-08-24 11:28:57 · 408 阅读 · 0 评论 -
weblogic单机安装(centos/linux)
下载:http://www.oracle.com/technetwork/cn/middleware/ias/downloads/wls-main-091116-zhs.html或http://www.oracle.com/technetwork/middleware/weblogic/downloads/wls-for-dev-1703574.htmlzip包(190M)用于开发和测试,原创 2016-10-13 14:33:04 · 1269 阅读 · 1 评论 -
Tomcat单机安装(centos/linux)
# 初始化tar -zxvf /home/apache-tomcat-8.5.4.tar.gz -C /homemv apache-tomcat-8.5.4 tomcat_appl# 配置(暂不进行)##vi /home/tomcat_appl/bin/catalina.sh## 在一堆注释后加入:##JAVA_OPTS="-server -Xms800m -Xmx80原创 2016-10-13 14:37:02 · 341 阅读 · 0 评论 -
Install Python 2/3 on CentOS 6.5 Server
参考:http://www.shayanderson.com/linux/install-python-3-on-centos-6-server.htm另也可获取源:wget http://www.python.org/ftp/python/3.3.3/Python-3.3.3.tar.xz先 xz -d xxx.tar.xz 将 xxx.tar.xz解压成 xxx.t原创 2015-09-06 16:05:29 · 1030 阅读 · 0 评论 -
Hbase centos下单机安装
# 解压安装tar -xvzf /mk/soft/hbase-1.1.2-bin.tar.gz -C /appl/cd /appl/hbase-1.1.2/conf# 配置环境变量vi /etc/profileexport HBASE_HOME=/appl/hbase-1.1.2export PATH=$PATH:$HBASE_HOME/binwqsource原创 2016-09-30 17:36:13 · 792 阅读 · 0 评论 -
Ubuntu初始化与Centos异同
1.1 apt-getapt-getinstall apache2 #安装apache设置apt-get本地源http://www.upantool.com/sense/2014/4679_4.html 1.2 NetworkingUbuntuCentosvim /etc/hosts vi原创 2016-11-30 17:45:41 · 560 阅读 · 0 评论 -
PostgreSQL XL Installation Guide
Host1Host2全局配置vi /etc/profileexport PGHOME=/appl/postgres-xl-9.5r1.4export PGUSER=pgxlexport LD_LIBRARY_PATH=$PGHOME/libexport PATH=$PATH:$PGHOME/binsource /etc/profile原创 2017-01-11 15:31:47 · 1742 阅读 · 0 评论 -
双机相互免密(ssh)
双机相互免密简单设置示例:#centos2 Nodesu - postgres(或其它所需用户)ssh-keygen -t rsa(一直回车)cp id_rsa.pub authorized_keysssh-copy-id -i centos3ssh centos3#centos3 Nodesu - postgres(或其它所需用户)原创 2017-06-14 18:13:19 · 386 阅读 · 0 评论 -
MySQL Cluster (NDB) Installation Guide
Architecturehttp://www.cnblogs.com/shihaiming/p/6084965.htmlGuidehttps://dev.mysql.com/doc/refman/5.7/en/mysql-cluster-installation.htmlhttp://www.cnblogs.com/ziqang/p/6108176.htmlhttp:/原创 2017-06-14 18:17:10 · 1215 阅读 · 0 评论 -
检测远程端口是否打开
检测远程端口是否打开常用telnet 110.101.101.101 80方式测试远程主机端口是否打开。 除此之外还可以使用:方法1.nmap ip -p port 测试端口nmap ip 显示全部打开的端口根据显示close/open确定端口是否打开。 方法2. nc -v host port参考:http://转载 2016-02-02 22:10:03 · 755 阅读 · 0 评论 -
Linux下安装MySql(主备)
一、复制原理mysql进行主备复制使用到了三个线程:1.主库上的转存储线程: 会将mysql server提交的事务写入到二进制文件中,这个二进制文件就叫做binlog。2.备库上的连接线程: 备库启动后,负责和主库通信,读取binlog,同时,将binlog存储进自己的一个叫中继日志的relaylog中。3.备库上的relaylog重放线程: 此线程会原创 2016-02-01 13:55:41 · 1090 阅读 · 0 评论 -
ssh无密码验证登录配置浓缩版
server A1)ssh-keygen -t rsa -P ''2)cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys (chmod 600 ~/.ssh/authorized_keys)3)(vi /etc/ssh/sshd_config,service sshd restart)(开启三行配置:RSAAuthentication ye原创 2015-06-15 18:52:48 · 463 阅读 · 0 评论 -
mysql在linux及windows上安装及远程连接
1、mysql 在linux端安装yum list installed mysql* # 查看有没有安装过yum -y install mysql-server # 服务器端yum -y install mysql-devel # 服务器端yum -y install mysql # 客户端2、mysql 在linux端配置/etc/my.cnf 加入原创 2015-08-24 15:01:48 · 1829 阅读 · 0 评论 -
centos单机安装Spark1.4.0
大体流程可以参考:http://qindongliang.iteye.com/blog/2224797(次参考:http://blog.csdn.net/wind520/article/details/43458925)补充细节如下:1)vi /etc/profile,我的配置为JAVA_HOME='/usr/lib/jvm/java-1.7.0-openj原创 2015-08-25 14:45:51 · 1121 阅读 · 0 评论 -
Virtualbox中Linux添加一个新磁盘
空间不足就需要添加一个新磁盘,详见 http://blog.itpub.net/26686207/viewspace-758434/另,一般来说不建议多个分区挂载到同一个目录(见 http://zhidao.baidu.com/link?url=MI_tIlRuuqxoztKktDa_GVI2HzeawdT7uz5_fJYP54jc6QlbIBaQ-QWK0u9ngdbFqLuqnlC转载 2015-09-10 15:24:22 · 392 阅读 · 0 评论 -
PySpark in PyCharm on a remote server
Q: sudo: sorry, you must have a tty to run sudoA:cd /etcchmod 640 sudoersvi /etc/sudoers#Default requiretty #注释掉 Default requiretty 一行。意思就是sudo默认需要tty终端,注释掉就可以在后台执行了。Q: VirtualBox的Sha原创 2015-09-07 17:59:17 · 1747 阅读 · 0 评论 -
Ubuntu 下安装 R
Ubuntu 服务器版本系统安装图解教程http://www.jb51.net/os/85856.htmlUbuntu 安装 Rhttp://my.oschina.net/kiwivip/blog/109771Rserve安装转载 2015-08-21 14:38:03 · 414 阅读 · 0 评论 -
virtualbox增强功能-VBoxGuestAdditions安装
本来想写”通过virtualbox实现共享目录“,但想不到其中用到的VBoxGuestAdditions搞了我一天~~~,因些单独拿出来写。一、准备virtualbox增强功能默认安装virtualbox时就已经有增强功能的iso,e.g. D:\Program Files\VirtualBox\VBoxGuestAdditions.iso如还是没有可以去官网另外下载,e原创 2015-09-08 17:20:42 · 16076 阅读 · 0 评论 -
CentOS安装glibc-2.14
[root@centos1 build]# ll /lib64/libc.so.6lrwxrwxrwx. 1 root root 15 Jan 21 18:10 /lib64/libc.so.6 -> libc-2.12.00.so到http://ftp.gnu.org/gnu/glibc/下载glibc-2.14.tar.xzxz -d glibc-2.14.tar.xz原创 2016-01-21 23:35:30 · 6512 阅读 · 0 评论 -
centos单机安装Hadoop2.6
总体上可以参考以下博文,Reference:http://blog.csdn.net/woshisunxiangfu/article/details/44026207但有些小地方需要补上:1)配置core-site.xml、hdfs-site.xml时,不能用中文2)服务器端开通8099端口/sbin/iptables -I INPUT -p tcp --dpo原创 2015-08-25 11:14:23 · 704 阅读 · 0 评论 -
linux centOS下安装R
Linux下安装R比在Windows下复杂多了,主要是前置compiler一大堆,网上一些文章也写得各有不齐,碰了我不少壁~~安装JDKyum -y install java-1.7.0-openjdk*java -version安装R假设安装目录为:/root/R-3.2.1yum -y install wgetwget http://mirror.b原创 2015-08-22 20:18:28 · 1237 阅读 · 0 评论 -
折腾sparkR
记下些参考,留待有缘人~~~yum -y install libcurl libcurl-develyum -y install libxml2 libxml2-develinstall.packages('RCurl')wget http://repos.fedorapeople.org/repos/dchen/apache-maven/epel-apac原创 2015-09-01 09:04:13 · 560 阅读 · 0 评论 -
redis 集群安装配置
转自朋友手稿~~一、安装目标:假设2台物理服务器的内存各只有256G,而redis集群要求最少3个主节点。仅有主节点。规划为每台服务器上装2个redis节点,每个节点最大支持96G,2台机共4个redis主节点,合计384G内存。因内存较少,规划没有配置从节点。4个redis节点,每个节点使用单独的文件系统(每个150G),存储序列化的数据和日志。该方案可最大限度使用内转载 2016-02-05 17:49:12 · 593 阅读 · 0 评论 -
Linux下安装MySql(版本5.5以上)
开始使用未编译版本(参考:http://www.iteye.com/topic/1128407,注:MySQL5.5以上,安装方法与以前的不同),结果麻烦多多,错误多多。后改用已编译版,方便多了。详细如下:从这里下载:http://dev.mysql.com/get/Downloads/MySQL-5.6/mysql-5.6.26-linux-glibc2.5-x86_64.tar.gz原创 2015-09-09 15:22:03 · 2043 阅读 · 0 评论 -
Linux下安装Nginx
(1)下载http://exim.mirror.fr/pcre/安装tar -xvzf pcre-8.38.tar.gzcd pcre-8.38./configure --prefix=/appl/pcre-8.38makemake checkmake install检验which pcre(2)yum install pcre-de原创 2016-02-01 11:24:53 · 413 阅读 · 0 评论