谭鹏_tp-CSDN博客

原创 linux Destination Host Unreachable

ping任何地址出现 Destination Host Unreachable基本的排错步骤（从上往下）ping 127.0.0.1ping的通说明tcp协议栈没有问题ping 主机地址 ping的通说明网卡没有问题ping 路由器默认网关 ping的通说明包可以到达路由器最后 ping DNS服务器地址卡在那一步，就补哪里我的问题是网关与win不一致 win：192.168.2....

2018-11-01 22:30:39 13821 1

原创 Spring boot 集成Apache Camel SFTP下载文件

#下面是官方文档的描述，在实践中遇到的官方文档中的一些坑，在下面会描述，话不多说直接开始。创建routepublic class MyFtpServerRouteBuilder extends RouteBuilder { @Override public void configure() throws Exception { // configure p...

2019-09-03 11:39:50 1246

转载 linux脚本自动打包拉取最新代码

上传到服务器，解压：unzip apache-maven-3.5.0.zip创建maven仓库文件夹mkdir mvn-repo设置settings.xml/home/admin/pkg/mvn-repo配置maven环境变量vi /etc/profileexport MAVEN_HOME=/home/admin/pkg/apache-maven-3.5.0export PATH...

2019-06-19 12:13:26 1605

原创 Spring Cloud Alibaba -Nacos

Nacos其实和Eureka都是注册中心，Eureka功能相对单一，而Spring cloud Alibaba Nacos 功能相对来说比较强大。我们来看下功能比较：##Eureka这是我们以往配置中心页面,在此页面中我门可以看到当前已注册的所有服务,而通常我们为了便捷,将Swagger路径默认绑定。##Nacos我们可以从左侧列表看到,有配置列表、历史版本、监听查询、服务列表等，Na...

2019-06-19 12:07:14 318

原创 Fescar原理

Fescar原理1、概述fescar刚推出不久，没几天。看了github的Issues，有人问：可以直接商用吗？作者的回复：我们也看一下fescard的历史：阿里是国内最早一批进行应用分布式（微服务化）改造的企业，所以很早就遇到微服务架构下的分布式事务问题。2014 年，阿里中间件团队发布 TXC（Taobao Transaction Constructor），为集团内应用提供分布式...

2019-06-19 12:06:08 576

原创 GCC版本中没有GLIBCXX_3.4.15

run: /usr/lib/libstdc++.so.6: version `GLIBCXX_3.4.15"" not found解决错误呈现该错误的原因是当前的GCC版本中，没有GLIBCXX_3.4.15，须要安装更高版本。我们可以输入：strings /usr/lib/libstdc++.so.6 | grep GLIBCXX，查看当前的GCC版本，成果如下：GLIBCXX_3.4...

2019-06-19 12:04:21 989

原创克隆虚拟机

今天把虚拟机的一台centos机器克隆了一台,出现网络不通,无法ping通外网的现象.在这里写一下解决过程:虚拟机克隆后,会遇到的问题: 1.MAC地址一样 2.IP一样 3.eth0配置文件存在,但是使用ifconfig -a 查看只能看到 eth1 4. 无法连接外网,提示域名无法解析解决办法:1. 更换MAC地址,步骤如下:打开虚拟机设置,找到网络适配...

2018-11-01 22:29:47 84

原创 idea Edit Configurations没有tomcat

1、File—>Setting—>Build,Execution,Deployment---->Application Servers—>"+"这里添加了之后Edit Configuration里面就可以看到Tomcat Server了2、若第一步无效，则删除disabled_plugins.txt 即可全盘扫描推荐使用Everything...

2018-11-01 22:28:46 1657

原创 Hadoop之YARN的安装与测试

1.配置计算调度系统Yarn和计算引擎Map/Reduce1.1 配置mapred-site.xmlnamenode上配置mapred-site.xml，默认没有mapred-site.xml文件，只有一个模版文件mapred-site.xml.template拷贝一个重命名一下即可，cp mapred-site.xml.template mapred-site.xml然后配置以下内容：...

2018-11-01 22:27:59 719

原创 hadoop基本知识点之HDFS

1.Hadoop组成Hadoop主要由三大模块组成：1.1 HDFS存储模块分布式文件存储系统提供了高可靠性、高扩展性和高吞吐率的数据存储服务hdfs典型结构：物理结构+逻辑结构1.2. YARN资源调配模块（引擎）（分布式资源管理框架）负责集群资源的管理和调度1.3. MapReduce计算引擎分布式计算框架（计算向数据移动–>移动计算而非移...

2018-11-01 22:25:11 213

原创 Hadoop-HDFS之CRUD

启动集群确认集群正常后，我们使用Java来操作DFS所有节点均正常。Java连接HadoopMaven添加Hadoop依赖。依赖初始化链接：初始化Select：查询根目录下的文件查询结果Add:创建更多操作自行查看：...

2018-11-01 22:23:44 193

在写文章之前，笔者先记录下昨天遇到的问题。我一共起了三台机器，在手动启动nn和dn的时候整个集群正常。但使用start-dfs.sh命令来启动的时候，若dn1启动，则dn2不启动,反之，dn2启动dn1不启动。手动启动未启动的那一台dn，整个集群恢复正常。start-dfs.sh只能带起来两台dn的其中一台dn。尝试若干办法无果，在配置ssh免密登陆后，发现，上述问题被解决。应该是密码验证问题...

2018-11-01 22:22:01 81

原创 Hadoop安装与集群配置(二)

开机后将各个虚拟机的ip修改好之后，将三个节点的ip以及hostname都加上可以使用xshell的工具，将命令一次性发送到各个窗口。三台虚拟机必须一致准备工作完毕！开始集群配置配置core-site.xml在所有的节点上都应该修改/etc/hadoop/core-site.xml.注意：需要修改tmp目录，不然默认是linux的tmp目录，这样会出现意想不到的错误，因为linux重启...

2018-11-01 22:20:35 88

原创 Hadoop安装与集群配置

一、环境及软件说明1、虚拟机软件：Oracle VM VirtualBox2、系统镜像：CentOS-7-x86_643、JDK：jdk-8u121-linux-x64.tar.gz4、hadoop安装包：hadoop-2.7.3.tar.gz二、配置网络选用host-only网络vi /etc/sysconfig/networkNETWORKING=yes...

2018-11-01 22:17:24 101

原创手动构建docker镜像

手动构建docker nginx镜像yum install wget gcc gcc-c++ make openssl-develWget http://nginx.org/download/nginx-1.15.5.tar.gz 下载nginxwget ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.38.tar....

2018-11-01 19:18:43 354

原创 docker 环境部署

环境安装:每台centos 都有老版本的docker 所以我们先卸载yum -y remove dockeryum install -y yum-utils然后下载utils/etc/init.d/docker start启动docker search centos查询centos环境第一个是官方镜像docker pull centos我选择官方的pull之后我...

2018-10-31 21:39:31 182

qq_41440381的博客