rainyrainbow的博客

转载 【开发流程】DevOps究竟是什么

DevOps 在公司项目中的实践落地 DevOps究竟是什么DevOps（Development和Operations的组合词）是一种重视“软件开发人员（Dev）”和“IT运维技术人员（Ops）”之间沟通合作的文化、运动或惯例。透过自动化“软件交付”和“架构变更”的流程，来使得构建、测试、发布软件能够更加地快捷、频繁和可靠。——维基百科DevOps是一种文化转变，或...

原创 【web】分享一个web资源网站

兜兜转转，今天回归技术，心中感慨万千。希望自己还能赶上大家的脚步，在不久的将来与大家重现大学时期的意气风发。今天重拾web技术，发现一个资源网站，分享给大家。https://developer.mozilla.org/zh-CN/docs/Web/Reference...

原创 android 小应用之 倒计时的简单实现方法

1.CountDownTimer该控件直接new就可以，可以使用EditText或者Button来显示1.声明控件类型 private CountDownTimer timer; 2. 具体实例化 time_btn = findViewById(R.id.time_btn); timer = new CountDownTimer(60000, 1000...

原创 Android 学习日记（二）android studio运行github代码

android studio作为android快速开发的主流应用，用来开发android项目可以说是十分方便了，最大的优点就是结构清晰，自带组件快速添加以及拖拽式的页面设计好用又直观。。。优点还有很多，学的还不深，以后再做总结。1.项目结构说明参考文章Android应用程序剖析这个网站是英文的，但是有很多的讲解和代码案例，很适合入门学习使用。认识完项目结构之后，你就可以重点关注各部分的实...

原创 Android学习日记（一）

标题混合开发学习日记（一）因为学过一点web的知识，现在在做毕业设计–移动应用APP的开发，所以想要学一些andriod的知识。老样子，学技术先从搭建环境做起，学andriod自然也是。1.andriod studio开发工具下载下载 传送链接https://developer.android.google.cn/studio?hl=zh-cn因为之前没有学过andriod，所以要从头...

原创 混合开发笔记（一）

混合开发概念：开发模式 Hybrid App (混合使用Native和Web技术开发)优点：开发快（相较于原生）、易更新、开发周期短缺点：性能问题（页面流畅度）、兼容性问题（浏览器web兼容）Android 5.0+和IOS9.0+上缺点不再明显注：手机硬件和网络技术的升级，使得缺点弱化应用场景：微信公众号，通过JSSDK连接Native端和Web端WebView通过JSBri...

原创 web-UI设计(设计思路篇)

webUI设计笔记来源：https://www.imooc.com/video/14005重点：设计流程设计规范web-UI概述UI 用户界面用户、界面、交互WUI 网页用户界面功能为主网页 传统网页用户为主网页 天猫等分辨率大部分设计师选择iMac显示器分辨率1024*768web分类门户类网站分类信息网站交易类网站娱乐性个人博客论坛 现在主要是社...

转载 【原理】HTTP协议

HTTP协议https://www.cnblogs.com/ranyonsue/p/5984001.html超文本传输协议GET：向特定的资源发出请求。POST：向指定资源提交数据进行处理请求（例如提交表单或者上传文件）。数据被包含在请求体中。POST请求可能会导致新的资源的创建和/或已有资源的修改。HTTP使用**统一资源标识符（Uniform Resource Identif...

原创 【5G】华为5G移动通信培训

华为5G培训1.移动通信发展趋势2. 5G应用场景划分3.5G技术特性4.国家LTE链接资源1.移动通信发展趋势1G: 模拟 语音2G（100Kb）: 数字 语音3G/HSPA(100Mbps): 语音 数据业务 互联网应用4G/LTE(1Gbps): 数据占绝对互道 各类丰富的APP 高速移动5G(10G+bps): 10-100倍现有用户吞吐率 海量连接 移动互联网 物联网2....

原创 【数据可视化】Echarts （一）认识Echarts

echartsecharts安装1. NPM安装2. 特性涉及技术原理echarts安装1. NPM安装http://caibaojian.com/npm/getting-started/what-is-npm.htmlnpm javascript代码包管理工具。npm 在nodejs里，所以安装了nodejs就安装好了npm下载安装nodejshttps://nodejs.org/...

转载 了解大数据 之 商业智能BI和大数据

企业核心目的之一是创造利润，为达到利润最大化，企业管理者需协调各职能部门包含财务、销售、市场、研发、生产、售后、人资、IT等，让大家能齐心协力地创造收入，节约成本，提高效能，把控风险，管理合规，分配合理。为保证流程一致性并收集作业环节中的所有数据，于是企业有了CRM、ERP、MES、HR、OA等业务系统；为更好保证目标达成，于是有了**各种管理措施包含MBO(OKR)管理、计划管理（包含预算和...

原创 数据可视化之图表基础

图表制作流程图表是根据原始数据原始文件来的。我们在理解数据、分析数据、提炼信息、明确主题的基础上去选择图表图表选择：1、确定比较关系2、确定图表类型3、确定图标处理方式图表制作1、准备数据图2、制作美化3、检查确认图表国外专家Nathan Yau总结了在数据可视化的过程中，一般要经历的四个过程，如下图所示（我做了适当的修改）。不论是商业图表还是科学图表，要想得到完美的图表，在...

原创 docker搭建高可用与负载均衡（二）nginx+apache+php+mysql主从复制+NFS+zabbix监控系统

1.项目概述网站建设是企业、组织、个人宣传和分享交流的重要的平台，尤其是在如今的信息化时代下，所有行业都在互联网的影响下实现数字化、在线化。在网站的建设中，网站的部署和发布是非常重要的一环，尤其是企业网站，随着企业的影响力和业务规模的扩大，企业的服务器需要承载的访问量和负载也日益增多，这就对企业提供网络服务提出了新的标准。因此，为使得企业网络可以承载更多的访问量和业务需求，我们就需要搭建web集...

原创 docker搭建高可用与负载均衡（一）lvs+keepalived+nginx+apache

1.需求分析网站建设是企业、组织、个人宣传和分享交流的重要的平台，尤其是在如今的信息化时代下，所有行业都在互联网的影响下实现数字化、在线化。在网站的建设中，网站的部署和发布是非常重要的一环，尤其是企业网站，随着企业的影响力和业务规模的扩大，企业的服务器需要承载的访问量和负载也日益增多，这就对企业提供网络服务提出了新的标准。因此，为使得企业网络可以承载更多的访问量和业务需求，我们就需要搭建web集...

原创 wordpress 代码集合

1.不同页面设置不同的页面标题<title><?php if ( is_home() ) { ?>网站首页的名称<?php } ?><?php if ( is_tag() ) { ?><?php single_tag_title(); ?><? $paged = get_query_var('paged'); if ( $pa...

转载 wordpress学习之用户权限

1.WordPress默认有五个用户角色：管理员 即最高权限，可进行所有增删改查操作编辑 发表文章，编辑文章，以及编辑其他人的文章作者 可以新建发布更改删除文章自己的文章投稿者 可以写文章但是需要审核才能发布文章订阅者 只能阅读网站发布的文章以及评论功能和权限对照表如下：用户角色的规定可以在后台设置（setting）里...

原创 linux学习（整理篇）

linux用户组和用户的相关操作解析shadow文件中密码字符串的内容手动修改passwd功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图...

原创 蓝桥杯试题整理 入门训练（java）

入门训练1. A+B问题2.序列求和3.圆的面积4.斐波那契1. A+B问题问题描述输入A、B，输出A+B。输入的第一行包括两个整数，由空格分隔，分别表示A、B。样例输入12 45样例输出57知识点：java简单的输入输出与计算，Scanner类，import java.util.*;public class Main{ public static void mai...

原创 git+hexo搭建自己的博客

之前搭建好了自己的博客站放到公网上一直也没找到时间写，现在即将放寒假了，正好趁这个时间总结一下自己一年里学到的知识，完善一下自己的博客欢迎大家关注我http://www.zhaochenhong.top用githubWeb+HEXO搭建博客教程参考（有时间出一份详细教程）：https://www.cnblogs.com/fengxiongZz/p/7707219.htmlhttps://...

原创 wordpress网站迁移问题解决方案

在wordpress的控制台这样设置就好了

原创 在VSphere上搭建nat服务器

这两天要用VM搭建Hadoop平台，但是无奈校园网账号不够用啊，索性搭建一个nat好了在VSphere上准备两个虚拟机一个用于做nat服务器一个用来测试，其中nat服务器要加两张网卡然后给test虚拟机加一个内网的网卡nat服务器配置在nat服务器里的网卡信息在nat服务其中设置iptables规则让发送至内网网卡的数据全部通过 ens160（内网网卡地址）iptab...

原创 三分钟学会调用百度地图API

1.首先你要在百度地图的官网注册成为开发者并创建自己的应用,获取ak,这里如果在web网页中，我选择用js2.然后在本地编写调用的html文件<!DOCTYPE html><html><head> <meta http-equiv="Content-Type" content="text/html; charset=utf-8" /&g...

PySpark

PySpark 是 Spark 为 Python 开发者提供的 API ，位于 $SPARK_HOME/bin 目录，其依赖于 Py4J。系统环境Linux Ubuntu 14.04jdk-7u75-linux-x64hadoop-2.6.0-cdh5.4.5scala-2.10.4spark-1.6.0-bin-hadoop2.6python3.4PyCharm1.在Pycha...

原创 Hadoop生态之 Spark， Pyspark

SparkSpark是一个类似于MapReduce的分布式计算框架，其核心是弹性分布式数据集，提供了比MapReduce更丰富的模型，可以快速在内存中对数据集进行多次迭代，以支持复杂的数据挖掘算法和图形计算算法安装目前Apache Spark主要支持三种分布式部署方式：分别是standalone、Spark on mesos和spark on YARN，其中，第一种类似于MapReduce ...

原创 Windows下Python的 Path问题解决

1.Python Path问题的解决今天准备用python写下爬虫，发现自己的python路径没有，在cmd中打python，显示如下：但是我安装了python的打开我的python，在python交互式命令行中输入以下两行命令，显示我的python安装路径...

转载 python爬虫的基本原理以及scrapy框架的使用

正则表达式基础正则表达式用于处理字符串，拥有自己独立的语法以及一个独立的处理引擎。不同提供正则表达式的语言里正则表达式的语法都式一样。. 和 * +. 匹配任意一个字符*匹配0或多次前面出现的字符.* 表示0或无限次的"."+匹配的字符至少要出现一次^ 和$^表示以某字符开头的匹配$ 表示以某字符结尾的匹配^a.* 表示匹配任何以a开头的字符串.*k$表示匹配任何以k结...

原创 Hadoop生态之数据库HBase的本地安装、基本操作以及Hbase JAVA API

What？HbaseHBase是一个分布式的，面向列的开源数据库，对应于Goole Bigtable，适合于非结构化数据存储的数据库。HBase基于列，在需要实时读写、随机访问超大规模数据集时，可以使用HBase。上图描述Hadoop Ecosystem中的各层结构。其中，HBase位于结构化存储层，Hadoop HDFS为HBase提供了高可靠性的底层存储支持。Hadoop MapR...

原创 hadoop之mapreduce实例——求平均值、去重

求平均数是MapReduce比较常见的算法，求平均数的算法也比较简单，一种思路是Map端读取数据，在数据输入到Reduce之前先经过shuffle，将map函数输出的key值相同的所有的value值形成一个集合value-list，然后将输入到Reduce端，Reduce端汇总并且统计记录数，然后作商即可。具体原理如下图所示：类似于写一个正常的hadoop javaAPI 操作，过程依次是启...

原创 hadoop常见操作以及简单的Hadoop javaAPI实现

原创 数据采集----网络爬虫（一）

网络爬虫（Web Crawler/Spider）数据采集的主要方式按照一定规则，自动抓取万维网信息的程序或者脚本部分或者全部抽取抓取到的信息，使数据进一步结构化合法性–Robots协议深度与广度优先* 静态和动态网页爬虫静态网页：爬虫逻辑比较简单动态网页：网页读取过程需要额外的加载过程泛用和主爬虫网络爬虫的基本架构爬取模块URL批量获取数据，模拟http请求过程抽...

原创 CentOS7安装tomcat探索

安装tomcat前需不需要安装JDK？当有请求时,tomcat会自动将jsp里面的java程序部分提取出来,调用jdk将java程序编译成class,然后再执行这个class.你可以到tomcat的work目录下看看,你可以找到从jsp里面提取出来的java程序, *_jsp.java,也有编译后的class文件, *jsp.class。所以，如果不装JDK，jsp程序就无法编译。因为jsp...

原创 数据可视化 Django

Django安装在linux系统中安装Djangopip install Django此时，可以进入python环境，再终端中输入python,然后敲入以下代码，可以查看django版本管理工具Django-admin.py创建项目1.首先创建一个项目目录，然后切换到该目录下，接着用django-admin.py来创建目录这样djangofirst项目就创建完成了。看下...

原创 数据科学 学习入门

数据科学用数据的方法来研究科学生物信息，天体信息，数字地球等用科学的方法来研究数据统计学，机器学习，数据挖掘等数据分析数据类型数据的数学结构主要困难1.数据量大2.数据维数高（最难）3.数据类型复杂算法角度看处理大数据的思路1.降低算法的复杂度（随机梯度下降SGD）2.分布式计算(MapReduce）数据科学的课程体系...

转载 Hadoop HDFS原理---分布式文件系统

HDFS工作原理NameNode和Sencondary NameNode节点通过HTTP GET（N->S）和POST(S->N)发送和接受数据体系结构，主从（master/slave）存储原理：冗余数据保存（多副本）HDFS 实现目标HDFS 相关概念块默认128MNameNodeFsImagenamenode节点启动时，会将fsimage中的...

原创 hadoop安装流程总结以及常用命令

hadoop安装流程主要步骤1.java环境配置因为hadoop底层是java写的，所以必须配置java环境2.配置SSH免密登录3.hadoop环境配置hadoop-env.sh中引入java4.hadoop组件配置信息HDFS配置core-site.xmlhdfs-site.xmlMapReduce配置mapred-site.xmlyarn-site.xml启动h...

原创 Hadoop生态圈以及hadoop伪分布式安装

大数据学习历程HADOOP生态圈简介HadoopHDFS分布式存储系统MapReduce分布式计算YARN分布式资源管理Spark 基于内存计算stormHive/pig 基于mapreduce（离线计算）Oozie 作业流调度系统zookeeper分布式协调服务Hbase 分布式数据库sqoop 数据库Mahouthadoop实验hadoop伪分布式安装hadoop开发插件安装最近在参加大...

原创 PS基础

PS基础入门知识合集知识教程链接集合色彩基础知识三大要素色相明度饱和度色彩的作用知识教程链接集合1.PS基础入门教程良心教程，讲解很nice的教程2.关于色彩色彩基础知识三大要素色相对于一个物体颜色的直观感受 红黄蓝 十二基本色相 二次色 三次色明度明度就是色彩的明暗差别饱和度饱和度是指色彩的鲜艳程度，也称色彩的纯度色彩的作用黄色：青春、乐观、豁达。常被作为点睛之笔。...

原创 安装git以及github的使用

https://www.liaoxuefeng.com/wiki/0013739516305929606dd18361248578c67b8067c8c017b0001.git安装（window）https://git-scm.com/downloads2.git initgit add < file>git commit -m < message&

原创 网络安全 初探

什么是XSS?XSS全称跨站脚本(Cross Site Scripting)，为不和层叠样式表(Cascading Style Sheets, CSS)的缩写混淆，故缩写为XSS，比较合适的方式应该叫做跨站脚本攻击。跨站脚本攻击是一种常见的web安全漏洞安全的本质是信任的问题，XSS是对非预期输入的信任Payload Exp PoCPoC Proof of Concep...

原创 知识图谱

这两天整理实验室网络，为理清网络，和实验室的伙伴们亲自一个交换一个交换的查，实验室里有几个平台，网络有点乱得重新规划一下。前两天看到了知识图谱的概念，今天实验室的老师回来了，又有提到这个知识图谱，于是乎想发个文章来记录一下关于学习知识图谱的过程。知识图谱方法篇 今天提到的知识图谱是类似于思维导图式的学习工具，主要是关于自己学习方法上的东西，构建自己的知识图谱，不仅能快速了解自己...