- 博客(11)
- 资源 (1)
- 收藏
- 关注
原创 Spark快速大数据分析——读书笔记
——8.16开始整理 Spark快速大数据分析推荐序: 一套大数据解决方案通常包含多个组件,从存储、计算和网络硬件层,到数据处理引擎,再到利用改良的统计和计算算法、数据可视化来获得商业洞见的分析层,这其中数据处理引擎起到了十分重要的作用,毫不夸张的说数据处理引擎至于大数据就相当于CPU之于计算机spark起源: 2009年加州大学伯克利分校AMPlab 创立spark大数据处理和计算框架。不同
2017-08-19 21:18:13 4987
原创 Linux 下 zip 文件解压产生中文乱码解决方案
unar方法1.安装unar yum install unar这个最简单省力,默认debian已经安装了额unar,这个工具会自动检测文件的编码,也可以通过-e来指定2.用unar解压unar file.zip即可解压出中文文件。
2017-08-16 14:48:26 73617 1
原创 spark 入门、深入学习书籍pdf-2017最强大礼包(精选当当Top10)
大礼包内含书目:Apache Spark源码剖析.pdf深入理解Spark:核心思想与源码分析.pdfSpark快速大数据分析.pdfSpark高级数据分析.pdf数据算法--Hadoop-Spark大数据处理技巧Spark大数据处理:技术、应用与性能优化(全).pdfSpark技术内幕 深入解析Spark内核架构设计与实现原理.pdf下载地址: http://pan.baidu.
2017-08-15 18:33:09 5941 3
原创 HDFS、YARN、MapReduce原理--读书笔记
8.13 大数据工程师/hadoop工程师 目的:高效的存储、处理这些海量、多种类、高速流动的数据 hadoop来源google 03~06 年 的三篇论文 hadoop利用分而治之的朴素思想为大数据处理提供了一整套新的解决方案,分布式文件系统HDFS、分布式计算框架MapReduce、NoSQL数据库HBase、数据仓库工具Hive等 hadoop主要组件:HDFS、MapReduce、
2017-08-15 10:30:04 1144
原创 Linux笔记
1.高级格式化:高级格式化又称逻辑格式化,它是指根据用户选定的文件系统(FAT12、FAT16、FAT32、NTFS、EXT2、EXT3)在磁盘特定区域写入特定数据,以达到初始化磁盘或磁盘分区、清除原磁盘或磁盘分区所有文件的一个操作。高级格式化包括对住主引导记录中分区表相应区域的重写、根据用户选定的文件系统,在分区中划出一片用于存放文件分配表、目录表等用于文件管理的磁盘空间,以便用户使用该分区管理文
2017-08-08 14:04:09 69939
转载 linux 系统tty、pty和pts 的概念及区别
tty(终端设备的统称): tty一词源于Teletypes,或者teletypewriters,原来指的是电传打字机,是通过串行线用打印机键盘通过阅读和发送信息的东西,后来这东西被键盘与显示器取代,所以现在叫终端比较合适。 终端是一种字符型设备,它有多种类型,通常使用tty来简称各种类型的终端设备。 tty指的是七个alt+crtl+F1~F7。 tty1-tty6表示文字界面,可以用Ct
2017-08-06 09:23:55 1395
原创 阿里云apache服务器外网无法访问(配置安全组,添加80服务)
背景:暑假 给学校校长办公室做网站,因为都回家,外网需要能访问到的原因,所以把 网站搬到了阿里云主机上CentOS的系统 ,已经安装好了 apache php mysql常规排错过程(ps:没耐心的童鞋请直接看最后一步,学习在阿里云控制台配置 安全组,允许 http服务)第一步:检查apache mysql php 服务是否开启 命令:netstat -anlp 命令执行结果: 如图所示: h
2017-08-03 16:14:10 8605 1
原创 阿里云学生机mysql初始密码
PS:前几天 注册申请了ali云。。。。却找不到 默认安装的mysql 的初始密码,真成了 ali晕。版本 :阿里云学生机标配CentOS 密码在 root用户家目录中的 passwd.txt
2017-08-02 10:39:18 2658
转载 PHPMailer简介+实例
PHPMailer是一个用来发送电子邮件的函数包,远比PHP提供的mail()方便易用。邮件格式说明 一封普通的电子邮件,通常是由发件人、收件人、抄送人、邮件标题、邮件内容、附件等内容构成。以下是一封邮件的标准格式:邮件标题(Subject):测试邮件 发件人(From):小红(xiaohong@xx.xx) 收件人(To):小白(xiaobai@xx.xx) 抄送人(CC):大红(daho
2017-08-01 17:29:49 947
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人