Spark基本架构及原理

Apache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架,最初在2009年由加州大学伯克利分校的AMPLab开发,并于2010年成为Apache的开源项目之一,与Hadoop和Storm等其他大数据和MapReduce技术相比,Spark有如下优势:Spark提供了一个全面、统...

2018-03-30 16:55:25

阅读数:89

评论数:0

ElasticSearch学习(4)--ElasticSearch启动时的各种报错

ElasticSearch启动时的各种报错【1】expecting token of type [START_OBJECT] but found [VALUE_STRING]]; 报错详细信息:SettingsException[Failed to load settings from [elas...

2018-03-30 16:53:51

阅读数:736

评论数:0

基于OpenStack和Kubernetes构建组合云平台——网络集成方案综述

一谈到云计算,大家都会自然想到三种云服务的模型:基础设施即服务(IaaS),平台即服务(PaaS)和软件即服务(SaaS)。OpenStack已经成为私有云IaaS的标准,而PaaS层虽然有很多可选技术,但已经确定统一的是一定会基于容器技术,并且一定会架构在某种容器编排管理系统之上。在主流的容器编...

2018-03-30 16:48:55

阅读数:124

评论数:0

openstack使用2——制作centos7镜像

一、前言使用镜像是安装好的系统做成镜像,在创建云主机后用户可以进入对Centos系统进行配置的界面,省去安装系统的麻烦。 直接使用Centos的iso作为镜像,用户在创建完虚拟机打开安装系统时,安装程序无法识别到本地磁盘,只有为虚拟机添加了块存储,才能识别出磁盘。但这样做会导致linux系统安装在...

2018-03-30 16:42:57

阅读数:95

评论数:0

使用ISO镜像制作适用于OpenStack的云镜像

参考链接:https://www.ibm.com/developerworks/community/wikis/home?lang=en#!/wiki/OpenStack/page/Creating+qcow2+CentOS+Image+for+OpenStackhttp://docs.opens...

2018-03-30 16:40:48

阅读数:234

评论数:0

Openstack使用ISO镜像启动云主机

一、准备工作 1.准备好没有异常的ocata版openstack 环境。 2.去centos官网下载原始ISO镜像,并将镜像上传到openstack控制节点上。二、实施 1.上传镜像# openstack image create "centos7" \ -...

2018-03-30 16:36:06

阅读数:161

评论数:0

在linux终端下快速删除输错的命令小技巧

有时候在linux终端中执行某个命令时,往往会输错命令,想删除掉重敲可以按backspace键,但这样较慢,一种简便技巧是,按住esc键同时按backspace键会较快删除【esc+backspace】组合键。或者【ctrl+u】组合键当然,直接回车更直接,但可能会产生一堆的错误提示。...

2018-03-30 14:58:34

阅读数:1464

评论数:0

为openstack 实例分配静态ip

1.为instance 配置静态 IP存在什么问题?2.如何才能实现为instance 配置静态 IP?3.设置静态ipNewton是否可以通过界面完成?传统运维中为服务器配置静态 IP 是再常见不过的了。但在 OpenStack 环境下只能指定 network,IP 都是 Neutron 从 s...

2018-03-30 14:40:04

阅读数:170

评论数:0

floating IP 原理分析 - OpenStack

floating IP 原理分析 - 每天5分钟玩转 OpenStack(107)上一节我们通过 Web UI 创建为 cirros-vm3 分配了浮动 IP,今天将分析其工作原理。首先查看 router 的 interface 配置:可以看到,floating IP 已经配置到 router 的...

2018-03-30 14:28:50

阅读数:307

评论数:0

centos 7 failed to connect to server code: 1006

After installing cloud image of centos 7 I can ssh to it nor problem, but when I use horizon and try to use vnc:Failed to connect to server (code: 10...

2018-03-28 15:45:59

阅读数:315

评论数:0

关于cirros镜像

 现在各大linux厂商,其实已经有专门给openStack提供的镜像,不过国内的朋友,不太习惯老外做镜像的方式,经常问密码是多少。现在安全事故很多,所以还是建议大家去官方下载镜像,有使用的问题,也比较好交流。自己手工做镜像,其实需要做不少工作,才能在OpenStack平台里用的很舒服。Conte...

2018-03-28 14:25:17

阅读数:639

评论数:0

CentOS7.2 调整mysql数据库最大连接数

系统版本:CentOS7.2 64bitmysql版本:5.5.47-MariaDB#############################################################CentOS7系统调整数据库最大连接数和之前有所不同,如下:1.查看mariadb数据库最大...

2018-03-27 14:06:10

阅读数:79

评论数:0

从零开始实现遗传算法(用遗传算法破解密码)

知乎专栏: https://www.zhihu.com/people/feng-xue-ye-gui-zi本系列文章的所有源代码都将会开源,需要源代码的小伙伴可以去我的 Github fork!上一篇文章我们动手实验了用遗传算法求解函数在给定区间的最大值。本篇文章再来看一个实验:用遗传算法破解密码...

2018-03-23 16:29:34

阅读数:99

评论数:0

UnicodeDecodeError: 'ascii' codec can't decode byte 0xe9 in position 0: ordinal not in range(128) 解决

最近在用Python处理中文字符串时,报出了如下错误:UnicodeDecodeError: 'ascii' codec can't decode byte 0xe9 in position 0: ordinal not in range(128) 1、原因因为默认情况下,Python采用的是as...

2018-03-23 16:28:50

阅读数:217

评论数:0

MySQL数据库查看数据表占用空间大小和记录数

MySQL数据库中每个表占用的空间、表记录的行数的话,可以打开MySQL的 information_schema 数据库。在该库中有一个 TABLES 表,这个表主要字段分别是:TABLE_SCHEMA : 数据库名 TABLE_NAME:表名 ENGINE:所使用的存储引擎 TABLES_ROW...

2018-03-23 11:07:52

阅读数:111

评论数:0

仰慕 Queens,先从 OpenStack Cinder 开始吧!

打造开源云计算中国第一互动社区内容专注于Linux、Kubernetes、OpenStack、容器、Ceph、Cloud Foundry......导读OpenStack 社区刚刚发行了 Queens 版本,此版本为 OpenStack 的第17个版本。此版包含了一些重大更新,例如SDN、GPU兼...

2018-03-16 15:19:16

阅读数:187

评论数:0

openstack queens版本安装-搭建你自己的企业私有云迎娶你的王后

openstack 安装步骤:环境准备:系统:centos7 x86_64controller 2c+6g+40g 192.168.147.50 可以nat上网compute 1c+4g+40g 192.168.147.60 可以nat上网neutron 1c+2g+20g 192.168.147...

2018-03-16 15:04:08

阅读数:591

评论数:0

OpenStack“女王”驾到,开源云中文社区粉丝炸锅了!

打造开源云计算中国第一互动社区内容专注于Linux、Kubernetes、OpenStack、容器、Ceph、Cloud Foundry......导读2月7日,开源云中文社区发布了《对于 OpenStack 新版本Queens,您有何期待?》文章,希望了解广大社区粉丝对即将于2月28日发布的Op...

2018-03-16 14:58:27

阅读数:196

评论数:0

2017年深度学习必读31篇论文(附下载地址)

2017年即将擦肩而过,Kloud Strife在其博客上盘点了今年最值得关注的有关深度学习的论文,包括架构/模型、生成模型、强化学习、SGD & 优化及理论等各个方面,有些论文名扬四海,有些论文则非常低调。一如既往,首先,标准免责声明适用,因为今年仅与GAN有关的论文就超...

2018-03-16 11:06:46

阅读数:243

评论数:0

用 Scikit-Learn 和 Pandas 学习线性回归

对于想深入了解线性回归的童鞋,这里给出一个完整的例子,详细学完这个例子,对用scikit-learn来运行线性回归,评估模型不会有什么问题了。1. 获取数据,定义问题没有数据,当然没法研究机器学习啦。:) 这里我们用UCI大学公开的机器学习数据来跑线性回归。数据的介绍在这: http://arch...

2018-03-16 11:02:30

阅读数:110

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭