自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

jsd2root的博客

今天的努力给明天一个更高的起点

  • 博客(30)
  • 资源 (8)
  • 问答 (1)
  • 收藏
  • 关注

转载 V8 引擎介绍

V8的前世今生V8是JavaScript渲染引擎,第一个版本随着Chrome的发布而发布(具体时间为2008年9月2日)。在运行JavaScript之前,相比其它的JavaScript的引擎转换成字节码或解释执行,V8将其编译成原生机器码(IA-32, x86-64, ARM, or MIPS CPUs),并且使用了如内联缓存(inline caching)等方法来提高性能。V8可以独立运

2017-12-21 12:46:56 496

转载 Robot Framework: 自定义自己的python库

Robot Framework: 自定义自己的python库利用Robot Framework编写测试用例,往往需要开发自己的关键字,有的关键字需要通过自己编写python代码来实现。这在rf中,就需要自己定义python库。这个过程其实不复杂,本文来介绍下。1、在python安装目录下的 Lib\site-packages 目录下 新建一个目录,目录名就是库名,如 New

2017-12-19 10:30:29 429

转载 Hadoop 生态圈介绍

首先我们先了解一下Hadoop的起源。然后介绍一些关于Hadoop生态系统中的具体工具的使用方法。如:HDFS、MapReduce、Yarn、Zookeeper、Hive、HBase、Oozie、Mahout、Pig、Flume、Sqoop。Hadoop的起源Doug Cutting是Hadoop之父 ,起初他开创了一个开源软件Lucene(用Java语言编写,提供了全文检索引擎的

2017-12-18 18:50:43 582

转载 Kubernetes 介绍

1. 前言Together we will ensure that Kubernetes is a strong and open container management framework for any application and in any environment, whether in a private, public or hybrid cloud.Ur

2017-12-18 18:43:04 463

原创 powershell 使用小计

PS C:\WINDOWS\system32>$passwd = ConvertTo-SecureString -String "123456" -AsPlainText -ForcePS C:\WINDOWS\system32>$passwd解决密码输入问题用 | fl * 查看对象完整属性

2017-12-18 18:32:10 227

转载 人工智能各种技术与算法

目录:1>单体人工智能>随机数(Random)>搜索策略(Search Strategies)//详细请参见http://blog.csdn.net/racaljk/article/details/18887881>>状态空间盲目搜索>>>深度优先搜索(Depth-First-Search)>>>广度优先搜索(Breadth-First-Sear

2017-12-13 14:05:12 694

转载 Oozie介绍

Oozie介绍1. Hadoop常见调度框架:(1)Linux Crontab:Linux自带的任务调度计划,在任务比较少的情况下,可以使用这种方式,直接执行脚本,例如添加一个执行计划: 0 12 * hive -f xxx.sql(2)Azkaban:(3)Oozie:Cloudera公司开源(4)Zeus:阿里开源。Oozie是管理Hadoop作业的工作

2017-12-13 10:11:06 323

转载 Vim命令合集

Vim命令合集命令历史以:和/开头的命令都有历史纪录,可以首先键入:或/然后按上下箭头来选择某个历史命令。启动vim在命令行窗口中输入以下命令即可vim 直接启动vimvim filename 打开vim并创建名为filename的文件文件命令打开单个文件vim file同时打开多个文件vim file1 file2 file3 ..

2017-12-12 16:45:50 215

转载 Hive安装及使用

Hive安装及使用攻略让Hadoop跑在云端系列文章,介绍了如何整合虚拟化和Hadoop,让Hadoop集群跑在VPS虚拟主机上,通过云向用户提供存储和计算的服务。现在硬件越来越便宜,一台非品牌服务器,2颗24核CPU,配48G内存,2T的硬盘,已经降到2万块人民币以下了。这种配置如果简单地放几个web应用,显然是奢侈的浪费。就算是用来实现单节点的hadoop,对计算资源浪费也是非常高

2017-12-12 16:12:02 1695

转载 Hadoop Pig简介、安装、试用

Hadoop Pig简介、安装、试用相比Java的MapReduce api,Pig为大型数据集的处理提供了更高层次的抽象,与MapReduce相比,Pig提供了更丰富的数据结构,一般都是多值和嵌套的数据结构。Pig还提供了一套更强大的数据变换操作,包括在MapReduce中被忽视的连接Join操作。 Hadoop版本:2.2.0 Pig版本:0.1

2017-12-12 14:47:17 529

转载 sqoop简单import使用

sqoop简单import使用一、sqoop作用?sqoop是一个数据交换工具,最常用的两个工具是导入导出。导入导出的参照物是hadoop,向hadoop导数据就是导入。二、sqoop的版本?sqoop目前有两个版本,1.4.X为sqoop1;1.99.X为sqoop2。两个版本不兼容。三、使用sqoop列出mysql下的所有数据库(my_pyt

2017-12-12 14:27:53 274

转载 高可用Hadoop平台-Flume NG实战图解篇

1.概述  今天补充一篇关于Flume的博客,前面在讲解高可用的Hadoop平台的时候遗漏了这篇,本篇博客为大家讲述以下内容:Flume NG简述单点Flume NG搭建、运行高可用Flume NG搭建Failover测试截图预览  下面开始今天的博客介绍。2.Flume NG简述  Flume NG是一个分布式,高可用,可靠的系统,它能将不同的海量数据收集

2017-12-12 11:42:29 317

转载 hbase 增删改查

两篇可以参考的文章,讲的不错 http://www.cnblogs.com/nexiyi/p/hbase_shell.html (http://blog.iyunv.com/wulantian/article/details/41011297)  ==============================hbase web操作访问地址 http://hmaster

2017-12-12 11:20:37 371

转载 为自己打造Linux小系统

为自己打造Linux小系统 一、前言Linux操作系统至1991.10.5号诞生以来,就源其开源性和自由性得到了很多技术大牛的青睐,每个Linux爱好者都为其贡献了自己的一份力,不管是在Linux内核还是开源软件等方面,都为我们后来人提供了一个良好的学习和研究环境。做为一个Linuxer,感谢各位前辈们为我们提供一个自由的空间,让我们也能够在学习的同时去研究Linux。本文主要

2017-12-11 11:43:16 1405

原创 自制linux

启动到grub 运行下面命令,启动系统grub> set root=(hd0,5)grub> linux /boot/vmlinuz-3.13.0-24-generic root=/dev/sda5grub> initrd /boot/initrd.img-3.13.0-24-generic

2017-12-11 11:07:31 192

转载 zookeeper 介绍

一、分布式协调技术在给大家介绍ZooKeeper之前先来给大家介绍一种技术——分布式协调技术。那么什么是分布式协调技术?那么我来告诉大家,其实分布式协调技术主要用来解决分布式环境当中多个进程之间的同步控制,让他们有序的去访问某种临界资源,防止造成"脏数据"的后果。这时,有人可能会说这个简单,写一个调度算法就轻松解决了。说这句话的人,可能对分布式系统不是很了解,所以才会出现这种误解。如果这些

2017-12-08 15:35:26 172

转载 dfsadmin

dfsadmin是一个多任务的工具,我们可以使用它来获取HDFS的状态信息,以及在HDFS上执行的一系列管理操作。调用方式例如:Hadoop dfsadmin -reportdfsadmin命令详解-report:查看文件系统的基本信息和统计信息。-safeadmin enter | leave | get | wait:安全模式命令。安全模式是NameNo

2017-12-08 15:06:09 653

转载 YARN介绍

1.1 YARN 基本架构YARN是Hadoop 2.0中的资源管理系统,它的基本设计思想是将MRv1中的JobTracker拆分成了两个独立的服务:一个全局的资源管理器ResourceManager和每个应用程序特有的ApplicationMaster。其中ResourceManager负责整个系统的资源管理和分配,而ApplicationMaster负责单个应用程序的管理。

2017-12-08 15:05:09 267

转载 HBase介绍、搭建、环境、安装部署

HBase介绍、搭建、环境、安装部署hadoop培训课程:HBase介绍、搭建、环境、安装部署1、搭建环境部署节点操作系统为CentOS,防火墙和SElinux禁用,创建了一个shiyanlou用户并在系统根目录下创建/app目录,用于存放Hadoop等组件运行包。因为该目录用于安装hadoop等组件程序,用户对shiyanlou必须赋予rwx权限(一般做法是root用户在根目

2017-12-08 14:36:02 226

转载 介绍Hadoop家族产品

主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, Flume, Bigtop, Crunch, Hue等。从2011年开始,中国进入大数

2017-12-07 15:54:56 251

转载 Hadoop 2.0 Queue setting 解析

Hadoop 2.0 Queue setting 解析。hadoop  资源控制采取queue 控制,每个queue 都有相关的资源配置信息。这里不说怎么进行配置变更(相关的参数就可在xml中修改),用一张图解释每个参数的意义。Queue State:                               queue 的状态                    

2017-12-07 15:53:11 426

转载 FS Shell

FS Shell调用文件系统(FS)Shell命令应使用 bin/hadoop fs 的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path。对HDFS文件系统,scheme是hdfs,对本地文件系统,scheme是file。其中scheme和authority参数都是可选的,如果未加指定,就会使用配置中指定的默认schem

2017-12-07 13:34:53 266

转载 ubuntu下source、sh、bash、./执行脚本的区别

ubuntu下source、sh、bash、./执行脚本的区别1.source命令用法:  source FileName  作用:在当前bash环境下读取并执行FileName中的命令。该filename文件可以无"执行权限"    注:该命令通常用命令“.”来替代。    如:source .bash_profile           . .bash_profile两

2017-12-06 16:55:47 3783

转载 rsync(一):基本命令和用法

以下是rsync系列篇:1.rsync(一):基本命令和用法2.rsync(二):inotify+rsync详细说明和sersync3.rsync算法原理和工作流程分析4.rsync技术报告(翻译)5.rsync工作机制(翻译)6.man rsync翻译(rsync命令中文手册)本文目录:2.1 说在前面的话2.2

2017-12-06 15:59:19 1020

转载 Ubuntu下搭建hadoop集群

Ubuntu下搭建hadoop集群目录Ubuntu下搭建hadoop集群预安装安装配置本地(独立)模式伪分布式模式修改配置文件设置无密码本地登录ssh运行停止守护进程全分布式模式测试主机安排情况设置SSH无密码登陆各个节点修改配置文件运行停止守护进程测试参考编辑此区域预安装JDK考虑到更好的兼容性,使用Or

2017-12-06 15:22:01 343

转载 Ubuntu16.04安装wps并解决系统缺失字体问题

Linux入门(7)——Ubuntu16.04安装wps并解决系统缺失字体问题进入WPS官网下载deb包:http://linux.wps.cn/ 安装,打开终端:cd 下载sudo dpkg -i wps-office_10.1.0.5672~a21_amd64.deb  解决打开WPS时出现的系统缺失字体问题:下载https://pan.baidu

2017-12-06 15:06:05 4456

转载 7个演讲坏习惯,让自己和观众都难受

致力于为各位职场青年提供动力。在自我表达日益重要的今天,怎么通过演讲更好地表达自己的想法呢。小编今天和大家分享这份——7个演讲坏习惯,让自己和观众都难受。一起学习演讲时候我们注意什么细节可以让我们事半功倍呢? PPT名称:分析7个演讲坏习惯PPT下载地址:http://www.ppt

2017-12-06 09:31:28 404

转载 BeEF 介绍

0×00 前言BeEF,全称The Browser Exploitation Framework,是一款针对浏览器的渗透测试工具。 目前对其测试的文章不是很多,所以希望通过本次测试给大家带来全新的认识。0×01 简介工具主页:http://beefproject.com工具框架:0×02 测试环境攻击主机:操作

2017-12-01 10:24:56 23394

转载 重放攻击(Replay Attacks)

重放攻击(Replay Attacks)重放攻击(Replay Attacks)1.什么是重放攻击顾名思义,重复的会话请求就是重放攻击。可能是因为用户重复发起请求,也可能是因为请求被攻击者获取,然后重新发给服务器。2.重放攻击的危害请求被攻击者获取,并重新发送给认证服务器,从而达到认证通过的目的。我们可以通过加密,签名的方式防止信息泄露,会话被劫持修改。但这

2017-12-01 00:04:04 1030 3

转载 文件上传漏洞原理与实例测试

0x00 什么是文件上传为了让用户将文件上传到网站,就像是给危机服务器的恶意用户打开了另一扇门。即便如此,在今天的现代互联网的Web应用程序,它是一种常见的要求,因为它有助于提高业务效率。企业支持门户,给用户各企业员工有效地共享文件。允许用户上传图片,视频,头像和许多其他类型的文件。向用户提供的功能越多,Web应用受到攻击的风险和机会就越大,这种功能会被恶意用户利用,获

2017-12-01 00:01:03 287

pytest 官方文档

pytest 官方文档,此文档为官方最新版2020-09-18,文章为英文文档。文字清晰,内容丰富,分享给大家。

2020-09-18

网络规划设计师.xmind

整理网络规划设计师考试知识点,可参考 https://blog.csdn.net/jsd2honey/article/details/99716988

2019-08-19

硬盘基础知识

在构成计算机硬件系统的所有设备中,硬盘作为存储设备中的一种,具有非常重要的地位。它是系统软件、应用软件与用户数据的载体。没有硬盘,计算机将无法正常工作。 硬盘作为一种外部存储设备,用户存放在其中的数据在计算机断电后并不会丢失,但这并不能保证这些数据永远不会丢失。当硬盘出现某些故障时,就极有可能会导致保存在其中的数据丢失。那么,硬盘中丢失的数据是不是就无法找回了呢?其实不然,只要我们采取合理的措施,就能够恢复部分甚至全部数据。

2018-12-27

中国惠普在电信运营商 核心系统的PAAS实践之路

目录 1. 背景和挑战 2. 惠普PAAS平台解决方案 3. 惠普PAAS平台实践

2018-12-27

现代企业备份架构——存储新风口

传统数据备份 现代数据备份 优劣对比 企业IT架构当前挑战

2018-12-27

Kingbase ES V8 安装

金仓数据库 KingbaseES V8R2 快速安装指南 KingbaseES数据库是一个大型通用的跨平台系统,可以安装和运行于Linux等多种操作系统平台下。KingbaseES数据库在各种操作系统平台上都很容易安装和配置。用户可以参考相应平台下的安装指南,安装KingbaseES数据库。

2018-12-27

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除