- 博客(14)
- 收藏
- 关注
RSS订阅转载 awk
awk 【单独的编程语言解释器】1、awk介绍 全称：Aho Weinberger Kernaighan 三个人的首字母缩写； 1970年第一次出现在Unix机器上，后来在开源领域使用它； 所以，我们在Linux中使用，改名为GNU awk；所以，在Linux上实际上叫做gawk； grep 行过滤器 -o -i -v -E grep egrep...
2019-08-21 20:03:00
274
转载 Hadoop02
1.用户要处理存储在分布式系统程序或数据需要自己调用MapReduce开发框架，MapReduce首先是一个开发API 是个开发库，调用这个库来写一个程序然后提交给MapReduce框架来运行 2.MapReduce代表三种东西： 第一，他是一个开发API 第二，又是一个运行框架，API所写的东西只能在这个平台上运行 第三，又是...
2019-08-18 20:18:00
86
转载 Hadoop01
Bigdata： 结构化数据：有严格约束 半结构化数据： 非结构化数据：没有元数据搜索引擎：搜索组件+索引组件（存放数据 由蜘蛛程序爬取而来）2003年 Google发表第一篇论文 The Google File System 解决大量数据存储 GFS文件系统 系统阐述了采取商业计算机集群就是普通x86系类的服务器的主机集群来完成定型的或分...
2019-08-17 18:47:00
103
转载 read与for语句循环
交互输入与for语句 1.交互输入 readpython中用input()函数，进行输入； read命令同时可以定义多个变量值；而输入的内容默认以空格符为分隔符，将值输入到对应的变量中； 如果默认值过多，最后所有的值都会被赋予给最后一个变量； 如果默认值过少，多余的变量则为空值； 示例： read a...
2019-08-17 15:47:00
646
转载 grep与正则表达式
1.grep程序 Linux下有文本处理三剑客 --grep sed awk grep：文本行过滤工具 sed：文本行编辑器（流编辑器） awk：报告生成器 grep 包含三个命令：gerp egrep fgrep ，它们是用来进行 行模式（pattern）匹配的 ergep=grep -E //使用扩展...
2019-08-14 10:39:00
87
转载 编程原理
1.编程介绍： 早期编程：驱动 硬件默认时不能使用的; 不同的厂家硬件设备之间需要进行指令沟通，我们需要驱动程序来进行"翻译"； 更趋近与硬件开发的工程师，要学习“汇编语言”；而“汇编语言”被厂家所限制；CC++的底层就是汇编语言； 现在编程：基于高级语言，以及超...
2019-08-13 11:27:00
99
转载 文本处理工具 – wc,cut,sort,uniq
wc命令：word count 统计文本中的字符个数-l：行数-w：单词数-c：字节数cut命令：用来做文件分隔-d DELIMETER：指明分隔符；-f 指定输出的数据#：第#个字段#，#[,#]：离散的多个字段，例如1，3，6#-#：连续多个字段，例如1-6混合使用：1-3,7--output-delimiter=‘xx’：指定以什么字符串输出；...
2019-08-13 09:58:00
111
转载 重定向
重定向和管道符：1、重定向 程序 = 指令 + 数据 命令 变量 在程序中，数据如何输入？又如何输出？ 数据输入：键盘 -- 标准输入，但是并不是唯一输入方式； --stdin echo "123456" | passwd --stdin "username" 例如：功能添加用户 ...
2019-08-13 08:43:00
86
转载 shell练习题
1、判断/etc/inittab文件是否大于100行，如果大于，则显示”/etc/inittab is a big file.”否者显示”/etc/inittab is a small file.” #!/bin/bash $Line=` wc -l /etc/inittab | cut -d ' ' -f1` if [ $Line -gt 100 ];...
2019-08-07 21:05:00
130
转载 bash的基本特质
1.命令 历史 作用：查之前使用的命令 关于命令历史的文件：每个用户家目录下面的.bash_hishory; 在关机的时候，会自动写入一次（history -r 将内存中的命令历史写入文件） 关于命令历史的变量（环境变量）： env //查看环境变量 set //查看更详细的环境变量参数...
2019-08-06 17:46:00
101
转载 dns轮训python 04
import dns.resolverimport osimport http.clientiplist = []appdomain = 'www.baidu.com'def get_iplist(domain=''): try: A = dns.resolver.query(domain,'A') except Exception as e: ...
2019-08-04 12:13:00
137
转载 Python03 函数和模块的使用
一、定义函数 在Python中可以使用def关键字来定义函数，和变量一样每个函数也有一个响亮的名字，而且命名规则跟变量的命名规则是一致的。在函数名后面的圆括号中可以放置传递给函数的参数，这一点和数学上的函数非常相似，程序中函数的参数就相当于是数学上说的函数的自变量，而函数执行完成后我们可以通过return关键字来返回一个值，这相当于数学上说的函数的因变量。 函...
2019-08-02 16:10:00
75
转载 Python02 分支结构
一、If语句密码1.有数字必须含有大写字母和小写字母password = 'A12'A = 'ZXCVBNMASDFGHJKLQWERTYUIOP'B ='zxcvbnmasdfghjklqwertyuiop'C = '1234567890'count1,count2,count3 = False,False,Falsefor i in password:...
2019-08-01 19:53:00
177
转载 Python基础001
一、Python（一）介绍 Python是一种计算机程序设计语言。是一种面向对象的动态类型语言，最初被设计用于编写自动化脚本(shell)，随着版本的不断更新和语言新功能的添加，越来越多被用于独立的、大型项目的开发。IPython是一种基于Python的交互式解释器。相较于原生的Python Shell，IPython提供了更为强大的编辑和交互功能。可以通过Pytho...
2019-07-30 20:48:00
105
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人