- 博客(30)
- 资源 (8)
- 问答 (1)
- 收藏
- 关注
转载 V8 引擎介绍
V8的前世今生V8是JavaScript渲染引擎,第一个版本随着Chrome的发布而发布(具体时间为2008年9月2日)。在运行JavaScript之前,相比其它的JavaScript的引擎转换成字节码或解释执行,V8将其编译成原生机器码(IA-32, x86-64, ARM, or MIPS CPUs),并且使用了如内联缓存(inline caching)等方法来提高性能。V8可以独立运
2017-12-21 12:46:56 496
转载 Robot Framework: 自定义自己的python库
Robot Framework: 自定义自己的python库利用Robot Framework编写测试用例,往往需要开发自己的关键字,有的关键字需要通过自己编写python代码来实现。这在rf中,就需要自己定义python库。这个过程其实不复杂,本文来介绍下。1、在python安装目录下的 Lib\site-packages 目录下 新建一个目录,目录名就是库名,如 New
2017-12-19 10:30:29 429
转载 Hadoop 生态圈介绍
首先我们先了解一下Hadoop的起源。然后介绍一些关于Hadoop生态系统中的具体工具的使用方法。如:HDFS、MapReduce、Yarn、Zookeeper、Hive、HBase、Oozie、Mahout、Pig、Flume、Sqoop。Hadoop的起源Doug Cutting是Hadoop之父 ,起初他开创了一个开源软件Lucene(用Java语言编写,提供了全文检索引擎的
2017-12-18 18:50:43 582
转载 Kubernetes 介绍
1. 前言Together we will ensure that Kubernetes is a strong and open container management framework for any application and in any environment, whether in a private, public or hybrid cloud.Ur
2017-12-18 18:43:04 463
原创 powershell 使用小计
PS C:\WINDOWS\system32>$passwd = ConvertTo-SecureString -String "123456" -AsPlainText -ForcePS C:\WINDOWS\system32>$passwd解决密码输入问题用 | fl * 查看对象完整属性
2017-12-18 18:32:10 227
转载 人工智能各种技术与算法
目录:1>单体人工智能>随机数(Random)>搜索策略(Search Strategies)//详细请参见http://blog.csdn.net/racaljk/article/details/18887881>>状态空间盲目搜索>>>深度优先搜索(Depth-First-Search)>>>广度优先搜索(Breadth-First-Sear
2017-12-13 14:05:12 694
转载 Oozie介绍
Oozie介绍1. Hadoop常见调度框架:(1)Linux Crontab:Linux自带的任务调度计划,在任务比较少的情况下,可以使用这种方式,直接执行脚本,例如添加一个执行计划: 0 12 * hive -f xxx.sql(2)Azkaban:(3)Oozie:Cloudera公司开源(4)Zeus:阿里开源。Oozie是管理Hadoop作业的工作
2017-12-13 10:11:06 323
转载 Vim命令合集
Vim命令合集命令历史以:和/开头的命令都有历史纪录,可以首先键入:或/然后按上下箭头来选择某个历史命令。启动vim在命令行窗口中输入以下命令即可vim 直接启动vimvim filename 打开vim并创建名为filename的文件文件命令打开单个文件vim file同时打开多个文件vim file1 file2 file3 ..
2017-12-12 16:45:50 215
转载 Hive安装及使用
Hive安装及使用攻略让Hadoop跑在云端系列文章,介绍了如何整合虚拟化和Hadoop,让Hadoop集群跑在VPS虚拟主机上,通过云向用户提供存储和计算的服务。现在硬件越来越便宜,一台非品牌服务器,2颗24核CPU,配48G内存,2T的硬盘,已经降到2万块人民币以下了。这种配置如果简单地放几个web应用,显然是奢侈的浪费。就算是用来实现单节点的hadoop,对计算资源浪费也是非常高
2017-12-12 16:12:02 1695
转载 Hadoop Pig简介、安装、试用
Hadoop Pig简介、安装、试用相比Java的MapReduce api,Pig为大型数据集的处理提供了更高层次的抽象,与MapReduce相比,Pig提供了更丰富的数据结构,一般都是多值和嵌套的数据结构。Pig还提供了一套更强大的数据变换操作,包括在MapReduce中被忽视的连接Join操作。 Hadoop版本:2.2.0 Pig版本:0.1
2017-12-12 14:47:17 529
转载 sqoop简单import使用
sqoop简单import使用一、sqoop作用?sqoop是一个数据交换工具,最常用的两个工具是导入导出。导入导出的参照物是hadoop,向hadoop导数据就是导入。二、sqoop的版本?sqoop目前有两个版本,1.4.X为sqoop1;1.99.X为sqoop2。两个版本不兼容。三、使用sqoop列出mysql下的所有数据库(my_pyt
2017-12-12 14:27:53 275
转载 高可用Hadoop平台-Flume NG实战图解篇
1.概述 今天补充一篇关于Flume的博客,前面在讲解高可用的Hadoop平台的时候遗漏了这篇,本篇博客为大家讲述以下内容:Flume NG简述单点Flume NG搭建、运行高可用Flume NG搭建Failover测试截图预览 下面开始今天的博客介绍。2.Flume NG简述 Flume NG是一个分布式,高可用,可靠的系统,它能将不同的海量数据收集
2017-12-12 11:42:29 317
转载 hbase 增删改查
两篇可以参考的文章,讲的不错 http://www.cnblogs.com/nexiyi/p/hbase_shell.html (http://blog.iyunv.com/wulantian/article/details/41011297) ==============================hbase web操作访问地址 http://hmaster
2017-12-12 11:20:37 372
转载 为自己打造Linux小系统
为自己打造Linux小系统 一、前言Linux操作系统至1991.10.5号诞生以来,就源其开源性和自由性得到了很多技术大牛的青睐,每个Linux爱好者都为其贡献了自己的一份力,不管是在Linux内核还是开源软件等方面,都为我们后来人提供了一个良好的学习和研究环境。做为一个Linuxer,感谢各位前辈们为我们提供一个自由的空间,让我们也能够在学习的同时去研究Linux。本文主要
2017-12-11 11:43:16 1405
原创 自制linux
启动到grub 运行下面命令,启动系统grub> set root=(hd0,5)grub> linux /boot/vmlinuz-3.13.0-24-generic root=/dev/sda5grub> initrd /boot/initrd.img-3.13.0-24-generic
2017-12-11 11:07:31 192
转载 zookeeper 介绍
一、分布式协调技术在给大家介绍ZooKeeper之前先来给大家介绍一种技术——分布式协调技术。那么什么是分布式协调技术?那么我来告诉大家,其实分布式协调技术主要用来解决分布式环境当中多个进程之间的同步控制,让他们有序的去访问某种临界资源,防止造成"脏数据"的后果。这时,有人可能会说这个简单,写一个调度算法就轻松解决了。说这句话的人,可能对分布式系统不是很了解,所以才会出现这种误解。如果这些
2017-12-08 15:35:26 172
转载 dfsadmin
dfsadmin是一个多任务的工具,我们可以使用它来获取HDFS的状态信息,以及在HDFS上执行的一系列管理操作。调用方式例如:Hadoop dfsadmin -reportdfsadmin命令详解-report:查看文件系统的基本信息和统计信息。-safeadmin enter | leave | get | wait:安全模式命令。安全模式是NameNo
2017-12-08 15:06:09 653
转载 YARN介绍
1.1 YARN 基本架构YARN是Hadoop 2.0中的资源管理系统,它的基本设计思想是将MRv1中的JobTracker拆分成了两个独立的服务:一个全局的资源管理器ResourceManager和每个应用程序特有的ApplicationMaster。其中ResourceManager负责整个系统的资源管理和分配,而ApplicationMaster负责单个应用程序的管理。
2017-12-08 15:05:09 267
转载 HBase介绍、搭建、环境、安装部署
HBase介绍、搭建、环境、安装部署hadoop培训课程:HBase介绍、搭建、环境、安装部署1、搭建环境部署节点操作系统为CentOS,防火墙和SElinux禁用,创建了一个shiyanlou用户并在系统根目录下创建/app目录,用于存放Hadoop等组件运行包。因为该目录用于安装hadoop等组件程序,用户对shiyanlou必须赋予rwx权限(一般做法是root用户在根目
2017-12-08 14:36:02 226
转载 介绍Hadoop家族产品
主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, Flume, Bigtop, Crunch, Hue等。从2011年开始,中国进入大数
2017-12-07 15:54:56 251
转载 Hadoop 2.0 Queue setting 解析
Hadoop 2.0 Queue setting 解析。hadoop 资源控制采取queue 控制,每个queue 都有相关的资源配置信息。这里不说怎么进行配置变更(相关的参数就可在xml中修改),用一张图解释每个参数的意义。Queue State: queue 的状态
2017-12-07 15:53:11 426
转载 FS Shell
FS Shell调用文件系统(FS)Shell命令应使用 bin/hadoop fs 的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path。对HDFS文件系统,scheme是hdfs,对本地文件系统,scheme是file。其中scheme和authority参数都是可选的,如果未加指定,就会使用配置中指定的默认schem
2017-12-07 13:34:53 267
转载 ubuntu下source、sh、bash、./执行脚本的区别
ubuntu下source、sh、bash、./执行脚本的区别1.source命令用法: source FileName 作用:在当前bash环境下读取并执行FileName中的命令。该filename文件可以无"执行权限" 注:该命令通常用命令“.”来替代。 如:source .bash_profile . .bash_profile两
2017-12-06 16:55:47 3783
转载 rsync(一):基本命令和用法
以下是rsync系列篇:1.rsync(一):基本命令和用法2.rsync(二):inotify+rsync详细说明和sersync3.rsync算法原理和工作流程分析4.rsync技术报告(翻译)5.rsync工作机制(翻译)6.man rsync翻译(rsync命令中文手册)本文目录:2.1 说在前面的话2.2
2017-12-06 15:59:19 1020
转载 Ubuntu下搭建hadoop集群
Ubuntu下搭建hadoop集群目录Ubuntu下搭建hadoop集群预安装安装配置本地(独立)模式伪分布式模式修改配置文件设置无密码本地登录ssh运行停止守护进程全分布式模式测试主机安排情况设置SSH无密码登陆各个节点修改配置文件运行停止守护进程测试参考编辑此区域预安装JDK考虑到更好的兼容性,使用Or
2017-12-06 15:22:01 343
转载 Ubuntu16.04安装wps并解决系统缺失字体问题
Linux入门(7)——Ubuntu16.04安装wps并解决系统缺失字体问题进入WPS官网下载deb包:http://linux.wps.cn/ 安装,打开终端:cd 下载sudo dpkg -i wps-office_10.1.0.5672~a21_amd64.deb 解决打开WPS时出现的系统缺失字体问题:下载https://pan.baidu
2017-12-06 15:06:05 4456
转载 7个演讲坏习惯,让自己和观众都难受
致力于为各位职场青年提供动力。在自我表达日益重要的今天,怎么通过演讲更好地表达自己的想法呢。小编今天和大家分享这份——7个演讲坏习惯,让自己和观众都难受。一起学习演讲时候我们注意什么细节可以让我们事半功倍呢? PPT名称:分析7个演讲坏习惯PPT下载地址:http://www.ppt
2017-12-06 09:31:28 404
转载 BeEF 介绍
0×00 前言BeEF,全称The Browser Exploitation Framework,是一款针对浏览器的渗透测试工具。 目前对其测试的文章不是很多,所以希望通过本次测试给大家带来全新的认识。0×01 简介工具主页:http://beefproject.com工具框架:0×02 测试环境攻击主机:操作
2017-12-01 10:24:56 23396
转载 重放攻击(Replay Attacks)
重放攻击(Replay Attacks)重放攻击(Replay Attacks)1.什么是重放攻击顾名思义,重复的会话请求就是重放攻击。可能是因为用户重复发起请求,也可能是因为请求被攻击者获取,然后重新发给服务器。2.重放攻击的危害请求被攻击者获取,并重新发送给认证服务器,从而达到认证通过的目的。我们可以通过加密,签名的方式防止信息泄露,会话被劫持修改。但这
2017-12-01 00:04:04 1030 3
转载 文件上传漏洞原理与实例测试
0x00 什么是文件上传为了让用户将文件上传到网站,就像是给危机服务器的恶意用户打开了另一扇门。即便如此,在今天的现代互联网的Web应用程序,它是一种常见的要求,因为它有助于提高业务效率。企业支持门户,给用户各企业员工有效地共享文件。允许用户上传图片,视频,头像和许多其他类型的文件。向用户提供的功能越多,Web应用受到攻击的风险和机会就越大,这种功能会被恶意用户利用,获
2017-12-01 00:01:03 288
网络规划设计师.xmind
2019-08-19
硬盘基础知识
2018-12-27
Kingbase ES V8 安装
2018-12-27
中信银行支付接口报错
2016-01-19
TA创建的收藏夹 TA关注的收藏夹
TA关注的人