- 博客(6)
- 资源 (9)
- 收藏
- 关注
RSS订阅原创 通过CMD结束端口被占用的进程
文章目录一、代码二、运行 开发程序过程中，经常会遇到【xx端口被占用】的情况，一种解决方法就是通过任务管理器结束对应的进程，如果任务管理器被禁用，往往只能重启机器。以下是我写的一段cmd批处理，用于结束被占用的进程。一、代码@echo offset toKillPort=set /p toKillPort=please toKillPort por...
2018-12-19 09:53:03
1482
原创 shell 基础练习
列车指定目录中文件的个数和目录的个数（不包括子目录）方法一（会把软连接作为文件计算）#!/bin/bashpath="/home/learner1/dir1211/*"i=0j=0for file in $path ; do if [ -f $file ]; then echo &
2018-12-14 16:45:28
442
原创 IDEA中运行Spark
IDEA中运行Spark有两种方式本地模式和远程模式。1.本地模式 本地Spark程序调试需要使用local提交模式，即将本机当做运行环境，Master和Worker都为本机。Maven依赖<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4....
2018-12-05 14:34:50
1273
原创 Spark-Shell运行任务
文章目录1.Spark-Shell 交互式编程1.1 启动命令1.2 Spark-Shell中运行wordcount2. spark-submit提交Job 开始本篇博客之前，请先准备好环境，参见【上一篇 Spark集群部署】1.Spark-Shell 交互式编程1.1 启动命令bin/spark-shell \--master spark://l0:7077 \--executo...
2018-12-05 14:14:26
2179
原创 Spark集群部署
文章目录1.集群角色2.安装部署1.集群角色 从物理部署层面上来看，Spark主要分为两种类型的节点，Master节点和Worker节点，Master节点主要运行集群管理器的中心化部分，所承载的作用是分配Application到Worker节点，维护Worker节点，Driver，Application的状态。Worker节点负责具体的业务运行。从Spark程序运行的层面来看，Spark...
2018-12-05 10:59:10
339
原创 Spark概述
文章目录1.什么是spark2.Spark特点3. Spark用途1.什么是spark Spark是一种快速、通用、可扩展的大数据分析引擎，2009年诞生于加州大学伯克利分校AMPLab，2010年开源，2013年6月成为Apache孵化项目，2014年2月成为Apache顶级项目。项目是用Scala进行编写。 Spark是基于内存计算的大数据并行计算框架。除了扩展了广泛使用的 M...
2018-12-05 09:54:35
474
使用Eclipse ADT构建PhoneGap入门程序
2016-09-11
javascript动态追加下拉框及Java端接受新追加的下拉框参数
2015-10-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人