- 博客(13)
- 收藏
- 关注
RSS订阅转载 hadoop ：mkdir: 'input': No such file or directory问题
初接触hadoop，遇到的问题真不少。在执行bin/hadoop fs -mkdir input时，出错了。测试发现，bin/hadoop fs -ls也不行。排查了一会才发现是版本的原因：2.x以前的版本这个命令，2.x之后的版本命令改成了：bin/hdfs dfs -mkdir -p ..input目录创建完成之后，开始上传本地目录：bin/hdfs dfs -put /root...
2019-03-28 18:08:23
4104
转载 linux下hadoop伪分布式启动 localhost: Error: JAVA_HOME is not set and could not be found.
今天开启 NameNode 和 DataNode 守护进程时出错localhost: Error: JAVA_HOME is not set and could not be found.1但是JAVA环境变量已经配好了，终端输入java -version也会显示版本信息解决方案如下修改hadoop-env.sh (我的hadoop安装在/usr/local/ 目录下)sudo ...
2019-03-28 17:19:45
1973
1
转载 vmvare虚拟机中外挂磁盘如果不识别ntfs 需下载ntfs-3g
选择虚拟机，编辑设置添加usb控制协议再次编辑设置，添加usb设备至此，该虚拟机可以识别U盘。在物理机上插入U盘操作虚拟机 fdisk --list 查看挂载的盘符新建一个文件夹，用来挂载U盘执行命令：mount 盘符 文件夹 即可完成挂载，然后进行文件的移动和复制如果挂载的时候出现不支持类型ntfs，可在虚拟机中安装 ntfs-3g软件卸载盘符：umount...
2019-03-28 14:59:05
1581
转载 python3 获取进程、硬件等基本运行信息
import psutil #进程运行情况import platform #包含系统信息查询函数import osimport logging# 硬件信息svmem = psutil.virtual_memory()mem_total = svmem.total # 系统内存总数mem_used = svmem.used # 内存已使用mem_free = svmem.f...
2019-03-21 17:28:51
1286
原创 使用pip3安装模块时 sudo: pip3: command not found
原因是pip3命令不是命令链接解决办法：sudo ln -s /usr/local/bin/pip3 /usr/bin/pip3
2019-03-21 17:24:36
13759
3
转载 python2或python3操作redis及其不同
前言：Python把中文字符串保存到Redis，中文字符串会被转换为字节流的形式，Python从Redis的获取的中文字符串值是以字节流的形式的，所以想要显示中文还需要解码。Python2从Redis获取的值是str类型，而Python3则是bytes类型，见下面两段代码。从下面两段代码可以看出中文字符串“计算机”在Python2是以'\xbc\xc6\xcb\xe3\xbb\xfa'形式存在的...
2019-03-14 14:01:08
917
转载 python3 读取xlsx中的数据
import xlrd# 文件路径file_path = r'F:/test.xlsx'#文件路径的中文转码，如果路径非中文可以跳过file_path = file_path.decode('utf-8')#获取数据data = xlrd.open_workbook(file_path)#获取sheet 此处有图注释（见图1）table = data.sheet_by_name(...
2019-03-11 16:15:35
12181
转载 linux学习书籍汇总 值得推荐的linux学习书籍
在总结这些linux学习书籍之前，我在各个linux学习讨论群，都能看到许多新手在问关于linux学习书籍推荐这样的问题。在这里，整理了一些值得推荐的linux学习书籍，希望对新手学习linux有一定的帮助。1.《嵌入式Linux C语言程序设计基础教程》内容简介：本书作为嵌入式专业的C语言教材。全书共11章，第1章介绍了嵌入式Linux下常用的C语言开发工具，为后面的学习打...
2019-03-04 17:09:27
3815
转载 什么是Linux内核?它有什么功能?
要解释什么是linux内核，经过整理，写了下面的内容，主要介绍什么是linux内核，以及它有什么功能。Linux内核的起源可追溯到1991年芬兰大学生Linus Torvalds编写和第一次公布Linux的日子。尽管到目前为止Linux生态系统早已远远发展到了Torvalds本人之外的范围，但Torvalds仍保持着对Linux内核的控制权，并且是Linux名称的唯一版权所有人。自发布Linu...
2019-03-04 15:22:06
5891
转载 Linux内核学习路线 学习linux内核的建议
学习linux内核，这个可不像学一门语言，c或者java一个月或者3月你就能精通掌握。学习linux内核是需要一步一步循序渐进，掌握正确的linux内核学习路线对学习至关重要，本篇文章就来分享学习linux内核的一些建议吧。1. 了解操作系统基本概念。如果不会，可以学习《操作系统：设计与实现》Andrew S.Tanenbaum 写的那本。以MINIX为例子讲解操作系统的概念。非常推荐。2...
2019-03-04 15:17:11
8282
转载 linux内核有什么用?盘点linux内核五大作用
有人常问我，学习linux内核有什么用?其实Linux内核是一个庞大而复杂的操作系统的核心，学习linux内核有五大作用，下面我们来盘点linux内核五大作用。1、管理进程：内核负责创建和销毁进程, 并处理它们与外部世界的联系(输入和输出)，不同进程间通讯(通过信号，管道，或者进程间通讯原语)对整个系统功能来说是基本的，也由内核处理。 另外， 调度器， 控制进程如何共享CPU，是进程管理...
2019-03-04 15:08:35
3554
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人