自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(17)
  • 资源 (2)
  • 收藏
  • 关注

原创 kali入门到放弃系列二:破解wifi无线密码

kali破解wiki密码

2022-12-08 21:55:15 13634 7

原创 【千问kali】E: Unable to locate package driftnet

Unable to locate package driftnet

2022-12-02 23:40:58 688 1

原创 kali入门到放弃系列一:01-kali之信息收集命令

信息收集 存活主机识别 arping cdpsnarf fping hping3 masscan thcping6 unicornscan xprobe2 路由分析 otrace intrace irpas-ass irpass-cdp netdiscover netmask 情报分析 visualise,Map and Mine Data theharvester twofi urlcr...

2020-07-15 00:00:02 732

原创 kali入门到放弃系列一:kali零开始的详细安装

注意:仅供学习交流使用,kali学得好,你懂得安装kali(1)kali的官网下载地址https://www.kali.org/downloads/选择标记的Kali Linux 64-Bit(Installer)开始下载2.安装kali打开vmware利用VMWARE安装kali, 这里提示网络自动设置失败,则选择继续如果有以下提示,则选择是...

2020-07-07 22:58:42 818

原创 深入解析docker技术(二)

制作镜像 拉取一个基础镜像centos Docker pull centos 创建一个交互式容器 #创建的容器名不能重复 Docker run –it –-name mycentos /bin/bash 软件上传 #在宿主机执行命令 Docker cp apache-tomcat.tar.gz mycentos:...

2020-04-22 00:27:20 247

原创 深入解析docker技术(一)

什么是docker Docker是一个容器化平台,它将应用程序及其所有依赖项以容器的形式打包在一起,以确保应用程序在任何环境(无论是开发环境、测试环境还是生产环境)中无缝运行。 Docker容器,将一个软件包在一个完整的文件系统中,其中包含运行所需的一切:代码、运行时、系统工具、系统库等任何可以安装在服务器上的东西。 它都将始终运行相同的程序,无论软件的环境如何。 ...

2020-04-19 22:51:18 460

原创 python:创建socket

import socket#创建socketsk = socket.socket((ip,port)) #socket()里面的参数是元组,不是两个字符串,#这里的socket默认参数,可以无需声明 family=AF_INET, type=SOCK_STREAM...

2020-04-06 22:15:50 259

原创 爬虫:通过百度map的api爬取地图上搜索结果的信息

爬起雁塔区的宾馆信息准备工作:1.新建city.txt 文件,里面保存的城市或者区域的名称(必须是百度地图上可以搜索到的)2.以下 内容保存在.py文件中,city.txt与.py文件保存在同一目录下# -*- coding: utf-8 -*-"""Created on Sat May 26 17:31:46 2018@author: yuehua"""...

2019-11-26 21:38:25 2217

原创 pyspark:创建dataFrame并查询数据

(1)创建json的RDD文件,路径文件名不能以数据开头(\会作为转义字符,需要将路径中的\进行转义)strjson=sc.parallelize(“**”)(或者strjson=sc.textFile(E:\data.txt))(2)创建dataFrame Swimjson=spark.read.json(strjson)(3)创建临时表括号中的为表名Swimjso...

2019-07-20 23:52:38 1334

原创 hadoop:win10本地启动hadoop遇到问题

启动hadoop 提示提示:FATAL datanode.DataNode: Exception in secureMain解决方法:hadoop\hadoop-2.7.7\hadoop-2.7.7\etc\hadoop目录下的slave中的localhost删除https://blog.csdn.net/mr_znc/article/details/80700652...

2019-07-20 23:17:55 1433

原创 hadoop:win10本地运行hadoop -version提示JAVA_HOME路径不设置正确,-Xmx512m不是内部命令或外部命令

1.java -version可以正常查询到版本,但是hadoop -version无法查询到哪版本2.这个是因为JAVA_HOME路径设置问题(1)系统环境变量路劲不能有空格,比如:D:\Program Files\Java\jdk1.8.0_191 这个就不行,可以将java文件夹放到根目录下,然后将环境变量为这个目录。(2)hadoop\hadoop-2.7....

2019-07-20 22:37:42 7073 4

原创 pyspark:读取数据时打印出的数据乱码

python读取文件后(代码的第一行有标注# -*- coding: utf-8 -*-)打印中文为乱码,如下:打开文本,选择转为为UTF-8编码,(不是使用UTF-8编码)保存再次执行读取代码,可以正常识别中文...

2019-07-20 16:31:46 2530

原创 pyspark:win10本地安装pyspark环境(hadoop2.7.7+pyspark2.4.3+spark2.4.3)

1.下载地址(官方下载太慢了,用镜像下载较快)https://mirrors.tuna.tsinghua.edu.cn/apache/下载hadoop2.7.7,pyspark2.4.3,spark2.4.3版本2.解压压缩包如果在win10本地运行,需要将这两个文件拷贝到hadoop目录的bin目录下hadooponwindows-master\bin中的winut...

2019-07-20 13:47:23 1542 1

原创 【kafka】kafka的数据丢失与重复

【消息ack机制】ack=0:生产者消息发送后立即返回,不用确认消息是否发送成功。(性能最好,可靠性最差。发过去就完事了,不关心broker是否处理成功,可能丢数据。)ack=1:(默认)生产者消息发送后,等待leader写入成功返回ack,则生产者才返回。(性能和可靠性相对平衡。当写Leader成功后就返回,其他的replica都是通过fetcher去同步的,所以kafka是异步写,主备...

2019-05-14 16:01:22 949

转载 hadoop配置文件详解系列(一)-core-site.xml篇(转载)

转载源于:https://blog.csdn.net/jpcflyer/article/details/80100107导读:关于hadoop的配置文件,目前其它网站资料中都是只写了几个常用的属性配置,但平时可能也会用到其它属性,这里就一起写出来,供大家参考。本篇先从core-site.xml开始,后续将继续进行其它配置文件的梳理。注:下文是图片版,如需文字版,请转至 博客园 (http:...

2018-08-28 23:11:44 1371

原创 问题:zookeeper服务执行./zkServer.sh start后,查询状态是Error contacting service. It is probably not running.

 总结:1.检查zoo.cfg中配置的server对应的服务器名称是否正确。 server.1=CentOS-5:2888:3888server.2=CentOS-6:2888:3888server.3=CentOS-7:2888:38882.启动服务的服务器是否达到三个及三个以上。 ...

2018-08-28 00:15:43 389

原创 【zoopkeeper】安装启动

 1下载压缩包zookeeper-3.4.5.tar.gz,并进行解压tar -zxvf zookeeper-3.4.5.tar.gz -C app/2.修改配置文件,mv zoo_sample.cfg zoo.cfg其中各配置项的含义,解释如下:1》.tickTime:CS通信心跳时间Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个 tickTi...

2018-08-10 01:16:31 2687

深入解析docker技术(一).docx

1.由浅入深学习docker技术,简单易学,1天学会docker常用知识点 2.包含常用操作,例如容器创建,查看容器信息,容器目录挂载等等操作 3.根据视频自己总结,截图是视频中的图, 截图引用来源:深入解析docker容器技术

2020-04-19

winutils.exe.zip

在本地windows机器搭建hadoop环境,运行代码,需要使用winutils.exe工具,否则会打印一些错误信息。这款工具适用于hadoop2.7版本

2019-07-20

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除