关闭

虚拟机怎么发送ctrl+alt+delete组合键

相信各位It的从业人员都遇到过安装了虚拟机搭建测试环境,可是在使用windows服务器版本操作系统的时候。出现要求发送ctrl+alt+delete组合键,才能登陆操作系统。为此咗嚛提供3个方法给您解决   方法/步骤     真实机发送ctrl+alt+delete组合键之后,会自动地打开真实机的任务调用系统。无法自动切换到虚拟机里面...
阅读(59) 评论(0)

Linux创建本地yum源

拷贝Linux操作系统的rhel-server-6.5-x86_64-dvd.iso镜像到装好的Linux中: #执行挂载命令mount –o loop /media/rhel-server-6.5-x86_64-dvd.iso /mnt/iso 输入df -h命令进行测试: 挂载成功之后:...
阅读(47) 评论(0)

RedHat7安装vmware虚拟机启动报错

提示错误如下: Kernel Headers for version 3.10.0-229.14.1.el7.x86_64 were not found.If you.... 安装kernel devel  yum install kernel-devel-3.10.0-229.14.1.el7.x86_64 -y...
阅读(58) 评论(0)

Spark基本术语表+基本架构+基本提交运行模式

一、Spark基本术语表 转载自:http://blog.csdn.net/simple_the_best/article/details/70843756 以下内容来自 http://spark.apache.org/docs/2.1.0/cluster-overview.html#glossary , 需要对 spark 的整个运行过程有所了解才能真正理解这些术语的涵义. ...
阅读(42) 评论(0)

Spark官网资料学习网址

百度搜索Spark: 这一个是Spark的官网网址,你可以在上面下载相关的安装包等等。 这一个是最新的Spark的文档说明,你可以查看如何安装,如何编程,以及含有对应的学习资料。...
阅读(41) 评论(0)

大数据开源组件图谱

转载自:http://blog.csdn.net/u010039929/article/details/70157376 文件系统数据存储内存技术数据搜集消息系统数据处理查询引擎分析和报告工具调度与管理服务机器学习开发平台       文件系统       HDFS Hadoop Distributed File System,简称HDFS,是一...
阅读(152) 评论(0)

HADOOP1.X中HDFS工作原理

HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统(中文,英文)。 HDFS有很多特点: ? ? ①?保存多个副本,且提供容错机制,副本丢失或宕机自动恢复。默认存3份。 ? ? ②?运行在廉价的机器上。(商用机)...
阅读(57) 评论(0)

大数据时代——为什么用HADOOP?

什么叫大数据 “大”,说的并不仅是数据的“多”!不能用数据到了多少TB ,多少PB 来说。 对于大数据,可以用四个词来表示:大量,多样,实时,价值。   大量:这个大家都知道,想百度,淘宝,腾讯,Facebook,Twitter等网站上的一些信息,这肯定算是大数据了,都要存储下来。 多样:数据的多样性,是说数据可能是结构型的数据,也可能是非结构行的文本,图片,视频,语...
阅读(56) 评论(0)

Linux Shell脚本中获取本机ip地址方法

ifconfig -a|grep inet|grep -v 127.0.0.1|grep -v inet6|awk '{print $2}'|tr -d "addr:"​ 命令解释如下: grep 'inet'             截取包含ip的行grep -v '127.0.0.1'     去掉本地指向的那行grep -v inet6           去掉包含in...
阅读(89) 评论(0)

Linux split命令参数及用法详解---linux分割文件命令

转载自:http://blog.csdn.net/xiaoshunzi111/article/details/52173994 功能说明:分割文件。 Split:按指定的行数截断文件 格式: split [-n] file [name] 参数说明: -n: 指定截断的每一文件的长度,不指定缺省为1000行 file: 要截断的文件 name: 截断后产生的文件的文件名的开头字...
阅读(57) 评论(0)

Shell中怎么获取当前日期和时间

转载自:https://zhidao.baidu.com/question/627912810044012524.html 获得当天的日期 [root@master ~]# date +%Y-%m-%d2017-10-19 有时候我们需要使用今天之前或者往后的日期,这时可以使用date的 -d参数 获取明天的日期 date -d next-day +%Y%m%d 获...
阅读(56) 评论(0)

Linux下nohup日志输出过大问题解决方案

转载自:http://blog.csdn.net/shawnhu007/article/details/50971084  最近在一hadoop测试集群运行一个spark streaming程序,然后使用nohup ./execute.sh & 执行让程序后台运行,才几天日志就上G了,如果有问题想要查看日志,显然打开文件是一件很麻烦的事,于是我想办法通过减小文件大小:   1、nohu...
阅读(289) 评论(0)

Linux重定向及nohup不输出的方法

转载自:http://blog.csdn.net/qinglu000/article/details/18963031 先说一下linux重定向: 0、1和2分别表示标准输入、标准输出和标准错误信息输出,可以用来指定需要重定向的标准输入或输出。 在一般使用时,默认的是标准输出,既1.当我们需要特殊用途时,可以使用其他标号。例如,将某个程序的错误信息输出到log文件中:./pr...
阅读(82) 评论(0)

Linux shell根据端口返回进程号杀死进程的方法

参考自:http://newmiracle.cn/?p=661 Linux shell根据端口返回进程号杀死进程的方法 kill -9 `lsof -t -i:8888` 这个就是杀死8888端口的进程号 参考自:http://www.linuxfly.org/post/182.htm lsof命令常见参数说明 原文地址:http://www.linuxfly.o...
阅读(209) 评论(0)

Spark Hadoop Free 安装遇到的问题

运行 ./sbin/start-master.sh : Spark Command: /usr/lib/jvm/java-8-openjdk-amd64/jre/bin/java -cp /home/server/spark/conf/:/home/server/spark/jars/*:/home/server/hadoop/etc/hadoop/:/home/server/hadoop/sh...
阅读(63) 评论(0)

【Spark Java API】broadcast、accumulator

转载自:http://www.jianshu.com/p/082ef79c63c1 broadcast 官方文档描述: Broadcast a read-only variable to the cluster, returning a [[org.apache.spark.broadcast.Broadcast]] object for reading it in ...
阅读(55) 评论(0)

Java消息机制 ActiveMQ入门实例

转载自:http://www.cnblogs.com/wyh3721/p/5917316.html 1.下载ActiveMQ  去官方网站下载:http://activemq.apache.org/  我下载的时候是 ActiveMQ 5.14.0 Release版  2.运行ActiveMQ 解压缩apache-activemq-5.14.0-bin.zip,然...
阅读(54) 评论(0)

Kafka简介

转载自:http://www.cnblogs.com/luotianshuai/p/5206662.html Kafka初识 1、Kafka使用背景   在我们大量使用分布式数据库、分布式计算集群的时候,是否会遇到这样的一些问题: 我们想分析下用户行为(pageviews),以便我们设计出更好的广告位我想对用户的搜索关键词进行统计,分析出当前的流行趋势有些数据,存储数...
阅读(128) 评论(0)

Kafka主要参数详解

转载自:http://www.cnblogs.com/weixiuli/p/6413109.html 一、相关参数配置 1、System ############################ System ##############################唯一标识在集群中的ID,要求是正数。broker.id=0#服务端口,默认9092port=9092#监...
阅读(89) 评论(0)

Eclipse提交代码到Spark集群上运行

Spark集群master节点:      192.168.168.200 Eclipse运行windows主机: 192.168.168.100 场景:         为了测试在Eclipse上开发的代码在Spark集群上运行的情况,比如:内存、cores、stdout以及相应的变量传递是否正常! 生产环境是把在Eclipse上开发的代码打包放到Spark集群上,然后使...
阅读(233) 评论(0)
119条 共6页1 2 3 4 5 ... 下一页 尾页
    个人资料
    • 访问:26356次
    • 积分:1000
    • 等级:
    • 排名:千里之外
    • 原创:74篇
    • 转载:45篇
    • 译文:0篇
    • 评论:7条
    最新评论