自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

wangjunji34478的专栏

Analytics BigData CloudComputing

  • 博客(281)
  • 资源 (11)
  • 收藏
  • 关注

转载 mysql数据备份及恢复

http://www.cnblogs.com/kevingrace/p/5907254.html

2017-11-07 09:19:41 707

原创 gitlab 私有环境镜像仓库

https://mirrors.tuna.tsinghua.edu.cn/gitlab-ce/yum/el6/

2017-11-02 17:36:13 3161

原创 cdh vm使用

1:注册用户2:下载vm镜像参考资源 https://www.cloudera.com/documentation/enterprise/latest/topics/quickstart_vm_administrative_information.html

2017-11-01 12:49:29 624

原创 mysql 双主迁移

mysql双主迁移1:注意导出的文件里面的配置参数SESSION.SQL_LOG_BIN=0                 如果有这个参数,则主从,不做同步,后面主从会失败。

2017-10-30 08:58:42 476

原创 国内好的镜像地址

mirror.bit.edu.cn

2017-10-25 19:14:42 1576

原创 mysql 基础操作

mysqlSQL日常使用命令 增删改查 权限分配 导入导出等连接MySQL格式: mysql -h(host) -u(user) -p(password)修改密码格式:mysqladmin -u用户名 -p旧密码 password 新密码# 给root加个密码ab12mysqladmin -u root -password ab12# 再将root的密码改为djg345

2017-10-24 15:30:41 339

原创 大屏定时开关机,及打开浏览器

1、自动定时开机  此功能需要在BIOS中设定,并且你的主板的ACPI高级电源管理设置必须支持这个功能,不过现在大多数的主板全支持,ACPI高级电源管理步骤一:  启动系统按DEL,进入BIOS,然后选中"POWER MANAGEMENT FEATURES"(电源管理设置),回车进入.在电源窗口中找到"RESTORE ON AC/POWERLOSS"项,按回车,然后通过

2017-10-24 11:30:32 762

原创 mysql基本语句

mysql逻辑架构最上层的服务并不是mysql独有的,连接处理、授权认证、安全第二层:查询解析,分析,优化,缓存以及所有内置函数所有跨存储功能都在这连接、线程处理:    连接管理与安全性:        每个客户端连接都会在服务器进程中拥有一个线程 ,查询缓存               解析器优化器存储引擎两种类型的锁通常

2017-10-19 15:39:48 320

原创 HDP Hiveserver2搭建高可用

第一步:添加hiveserver2服务第二步:增加配置项hive.server2.support.dynamic.service.discoverytrue hive.server2.zookeeper.namespacehiveserver2 hive.zookeeper.quorumhadoop1:2181,hadoop0:2181,ha

2017-10-19 09:18:04 4166

原创 Connecting to https://XXXXXXXXXXXXXXXXXXXXXXXX:8440/ca

INFO 2017-08-05 01:14:38,849 HeartbeatHandlers.py:115 - Stop event received INFO 2017-08-05 01:14:38,849 NetUtil.py:125 - Stop event received INFO 2017-08-05 01:14:38,849 ExitHelper.py:53 - Performi

2017-10-18 18:16:38 409032

翻译 MySQL 5.7参考手册 目录

Mysql现在在电商广泛应用,为了更好的处理数据库。MySQL 5.7参考手册 是权威的mysql文档,其中包含了NDB7.5 和 NDB 7.6的内容MySQL 5.7参考手册目录:序言和法律声明1一般信息1.1关于本手册1.2排版和语法约定1.3 MySQL数据库管理系统概述1.3.1什么是MySQL?1.3.2 MySQL的主要特点1.3.3 MySQ

2017-09-27 14:39:19 3440

原创 如何使用docker搭建oracle测试环境

第一步:安装docker yum update 第二步:安装docker yum install docker 第三步:注册阿里云加还器https://dev.aliyun.com/第四步:找到加速器的地址sudo mkdir -p /etc/dockersudo tee /etc/docker/daemo

2017-08-30 22:09:41 4651

原创 在 Linux 下查看进程运行时间的命令

需要使用 ps 命令来查看关于一组正在运行的进程的信息。ps 命令提供了如下的两种格式化选项。etime 显示了自从该进程启动以来,经历过的时间,格式为 [[DD-]hh:]mm:ss。etimes 显示了自该进程启动以来,经历过的时间,以秒的形式。如何查看一个进程已经运行的时间?你需要在 ps 命令之后添加 -o etimes 或者 -o etime 参数。它

2017-05-12 09:41:20 2225

原创 SparkR终极解决方案

问题:Spark支持sparkR需要安装R如果R需要支持强大的内库,就需要安装第三方内库(需要连网)。解决步骤:      第一:安装开发工具集R对操作系统有一定的要求,所以先安装开发工具集,因为里面有c++的编译                            配置操作系统yum源(如果不会请百度)                            安装开发

2017-04-28 14:11:35 1340

原创 Hue安装及测试文档

开始准备使用docker 的,但是官方镜像为Ubuntu 的,不是很方便,但是docker file研究了一下,后面有时间再研究一下docker,docker 还是很好玩的。(这个花了一天时间)----放弃,但有收获,看看这奇葩的配置docker run -tid --name huewajj --hostname dcp241 -p 8888:8888 -v /usr/h

2016-12-19 22:06:37 2183

原创 HDP安全架构

HDP安全概述安全性对于在Hadoop生态系统中存储和处理敏感数据的组织来说至关重要。许多组织必须遵守严格的企业安全策略。Hadoop是一个用于数据存储和使用商品服务器对集群进行大规模处理的分布式框架。向Hadoop添加安全性具有挑战性,因为并非所有的交互都遵循传统的客户端 - 服务器模式。在Hadoop中,文件系统是分区和分布式的,需要在多个点进行授权检查。一、提交的作业后,

2016-12-19 22:04:13 5089

原创 hdp hadoop ambari pgserver backup

#!/bin/bash export PGPASSWORD=bigdataBACKUP_PATH=/var/lib/pgsql/backupsLOG_FILE=/var/lib/pgsql/backups/pgbackup.logDATE=$( date +%Y_%m_%d_%k:%M:%S)remote_ip="test15"log(){LEVEL=$1I

2016-11-10 12:10:56 674

原创 https://readthedocs.org/

https://readthedocs.org/

2015-09-07 22:43:44 821

转载 python registry path

## script to register Python 2.0 or later for use with win32all# and other extensions that require Python registry settings## written by Joakim Loew for Secret Labs AB / PythonWare## source:# h

2015-08-09 01:35:02 542

原创 java 性能调优

1,策略、方法和方法论java性能调优实践中的各上方法

2015-08-01 16:50:21 580

原创 系统运维相关的知识

OMS中间件系统运行报告                                                         起始日期:2015年7月1日-终止日期:2015/7月30日  前言1,本报告主机就与oms中间件相关的各项系统的各项工作,包括应用系统,操作系统,版本发布及变更,附件等进行记录,分析汇总和报告,以保障oms的安全、稳定、高效运行,支持业

2015-07-30 23:36:04 1208

原创 excel的处理

# -*- coding: utf8 -*-import xlrdimport xlsxwriterdata = xlrd.open_workbook( "00-KIDSWANT-basis-20141114_双周计画.xls".decode('utf8').encode('gbk') )table = data.sheets()[0]nrows = table.nrows

2015-07-29 22:57:46 631

原创 妈妈再也不担需要编译的python包了

你还在为下载的python 包而烦恼吗pip install *.whlhttp://www.lfd.uci.edu/~gohlke/pythonlibs/3i673h27/

2015-07-28 23:53:07 1298

原创 Linux双网卡挷定

linux?下双网卡绑定?环境:rhel?6.0?1.新建/etc/sysconfig/network-scripts/ifcfg-bond0文件?DEVICE=bond0?ONBOOT=yes?BOOTPROTO=static?IPADDR=192.168.0.23?NETMASK=255.255.255.224?GATEWAY=192.168.128.233?U

2015-05-18 14:30:04 1036

原创 python 一些重要内库

python一些重要的应用

2015-01-20 13:46:09 734

原创 zabbix客户在linux 上安装

#!/bin/baship=59.201.201.152groupadd zabbixuseradd -g zabbix zabbixyum -y install gcc curl-devel net-snmp-devel fping e2fsprogs-devel zlib-devel libgssapi-devel krb5-devel openssl-devel wget libs

2015-01-03 00:16:27 1670

原创 zabbix 一键安装,前提是mysql已安装好,且已设好密码,已在centos 6.5上做过测试

#!/bin/bash#zabbix 一键安装#数据库用户名DBUSER='root'#数据库用户密码DBPASS='root'#本地地址DBHOST='localhost'#zabbix 下载的版本ZBX_VER='2.4.3'###检查返回值 function checkReturn { if [ $1 -ne 0 ]; then echo "fa

2015-01-02 11:03:15 3248

转载 远程连接端口修改

众所周知,远程终端服务基于端口3389。入侵者一般先扫描主机开放端口,一旦发现其开放了3389端口,就会进行下一步的入侵,所以我们只需要修改该务默认端口就可以避开大多数入侵者的耳目。 步骤:打开“开始→运行”,输入“regedit”,打开注册表,进入以下路径:[HKEY_LOCAL_MACHINE/SYSTEM/ CurrentControlSet/Control/Terminal

2014-12-30 15:23:39 686

原创 Windows使用Xmanager远程登录Centos方法

第一部分(配置centos/redhat系统)1安装gdm。.打开centos终端,在终端中输入yumlist gdm。等一段时间后就会自动安装完毕。2.配置gdm         方法一:(图形界面操作,比较方便)(1)      打开位于etc/gdm/目录下的custom.conf文件(2) 主要添加下面的项[daemon]RemoteGreeter=/u

2014-12-16 18:46:11 982

转载 svn的备份

备份策略==============svn备份一般采用三种方式:1)svnadmin dump 2)svnadmin hotcopy 3)svnsync. 注意,svn备份不宜采用普通的文件拷贝方式(除非你备份的时候将库暂停),如copy命令、rsync命令。 笔者曾经用 rsync命令来做增量和全量备份,在季度备份检查审计中,发现备份出来的库大部分都不可用,因

2014-12-09 19:40:48 1122

原创 mysql 数据库状态检查

检查数据库各个系统状态# -*- coding: utf-8 -*-'''Created on 2014年11月25日@author: wangjunji@deprecated: check db status @summary: table tables db statment'''import sysimport MySQLdbimport osimport Config

2014-11-25 20:24:49 610

原创 web的自动化发布

自已动手实现Jenkins ,自动化发布

2014-10-27 15:12:56 3627

原创 redhat and centos 系统常用命令

redhat and centos 常用系统命令

2014-09-28 11:21:29 1104

原创 中毒后的反思,我再也受不了

安全总是相对的,再安全的服务器也有可能遭受到攻击。作为一个安全运维人员,要把握的原则是:尽量做好系统安全防护,修复所有已知的危险行为,同时,在系统遭受攻击后能够迅速有效地处理攻击行为,最大限度地降低攻击对系统产生的影响。一、处理服务器遭受攻击的一般思路系统遭受攻击并不可怕,可怕的是面对攻击束手无策,下面就详细介绍下在服务器遭受攻击后的一般处理思路。1

2014-09-25 08:38:07 8605

原创 磁盘分区及格式化

fdisk -l查看 系统能否认别usb 第二格式化磁盘

2014-09-22 08:41:37 743

转载 rman的自动备份

在Oracle中,三大文件即控制文件,数据文件,日志文件的丢失与破坏都将需要使用还原或恢复来使数据库正常化。而RMAN还原与恢复是实现数据库完整性、可靠性必不可少的手段之一。还原简言之即是将所需的文件从备份中复制到原来文件所在的路径。还原通常可以包括数据库、表空间、数据文件级别的还原。通常还原后的内容会滞后于最新的数据库SCN,因此将归档日志、联机重做日志文件中的内

2014-09-12 17:15:49 766

原创 linux 系统安全防护

linux clamav 免费查毒工具一,安装clamav1.yum install clamav -y  如果找不到包的话,只有下载源码自己编译安装了。tar zxf clamav-0.97.4.tar.gzcd clamav-0.97.4groupadd clamav useradd -g clamav -s /bin/false clamav

2014-09-10 10:40:29 2924

转载 zabbix利用orabbix监控oracle

2012-09-10 17:49:43|  分类: Monit |  标签:zabbix  orabbix  oracle  |举报|字号 订阅Orabbix 是一个用来监控 Oracle 数据库实例的 Zabbix 插件。下载地址:http://www.smartmarmot.com/product/orabbix/download/  Orabbix

2014-09-05 16:41:15 5641

原创 oracle 静默安装

oracle 静默安装,录制过脚本的噢

2014-09-04 09:50:47 942

原创 java 步步惊心 (web ) 深入理解servlet

用户在浏览器中输入一个网hf

2014-08-25 23:53:54 1104 2

Smash-wall-install.zip

用于Liunx系统mysql redis 等等工具的安装及配置,需要的自已下载

2019-09-04

区块链重塑电信行业

大多数通信服务供应商 (CSP) 都在实施大 型数字化转型项目,以便应对困扰他们的 颠覆性因素。在此背景下,区块链技术的 运用不仅可帮助 CSP 改善当前运营环 境,而且能够开拓基于区块链技术的新服 务。此外,随着对透明度和信任度的需求 持续增加, 强大的区块链技术可以强化企 业参与生态系统的基础,支持新业务模 式,从而实现创收。区块链技术的重要程 度只会与日俱增。 CSP 应该从长远利益 出发,评估区块链在收入增长和平台业务 机遇,以及内部效率方面带来的积极影 响。 执行摘要 区块链是目前热议的技术之一。不同行业的企业都在探索区块链对其所 在领域的潜在影响,以及如何利用此项新兴技术获益。通信服务供应商 (CSP) 也不例外。 但是, CSP 面临的最大问题是, “能获取什么样的收益? ”以及“从何处、 如何着手? ”令人欣慰的是,从中获益的机会是真实存在的。区块链共享 总账方法的核心特征是在交易过程中,为各方参与者构建可信、安全、 透明且可控的生态系统。这可降低成本、提高效率,并改善所有参与者 的体验。我们最近开展的全球消费者调研显示,在处理个人数据和保护 隐私安全方面, CSP 竟然位居最可信组织的地位,在某些国家或地区甚 至超过金融机构和政府。 1 这为他们奠定了优势位置,有助于利用区块链 技术来获取收益。 对于 CSP 来说,区块链意味着效率的提升以及全新的收入增长机遇

2018-02-24

智能合约的理念

智能合约的理念,何谓“抵押品”? “抵押品”的目的是什么?它怎样梳理了我们的已 有的关系? 我认为,尤其是合约的规范化,在我们的关系层面实现了理想化抵押品 的蓝图。 多种类型的合约条款, 如抵押品,债券,产权界定等等, 可以嵌入在我 们执行条款的硬件和软件中,通过这样的方式使那些不遵守协议者的违约成 本很高,(如果需要的话,令人望而却步的)。举一个典型的活生生的例子, 我们可以认为智能的原始祖先,是不起眼的自动售货机。 在潜在的、 损失有 限的评估后,使钱箱里的钱远远少于破坏者付出的代价。 根据显示的价格该 机收取硬币, 通过一个简单的机制形成了最初的计算机设计科学,有限自动, 传递变化和制造。自动售货机是搬运合约:任何持有硬币的人可以与供应商 交易。锁箱和其他安全机制保护储藏的硬币和货物会不被破坏, 足以允许自 动售货机有利可图地在各种各样的区域部署。 优越于自动售货机,智能合约通过数字的方法来控制有价值的、所有类 型的任何资产。智能合约涉及到一个动态的、经常主动运作的财产,且提供 更好的观察和核查点,其中主动措施必须分毫不差。 作为另一个例子,为汽车而设计出的假想数字保障系统。智能合约设计 策略建议:持续完善抵押品协议以便其更充分地嵌入到处理资产的合约条款 中。根据合约条款, 这些协议将使加密密钥完全控制于具有操作属性的人,其人正当地拥有该财产。在最简单的实现中,为了防止偷窃,除非被合法的 拥有者完成正确的”挑战-应答“过程,否则车可以呈现出不可操作状态。 如果汽车用做以确保还贷,在这种传统的方式来在实现强大的安全性同 时将创造一个头痛的债权人 - 收款人将不再能够查收赖账的车。为了解决这 一问题,我们可以创建一个智能扣押权协议:如果物主不交费,智能合约调 用扣押权协议,其把车钥匙的控制权交给银行。该协议可能会比雇佣追债人 更便宜、 更有效。进一步的细化,如生成可证明的扣押权权注销,以及当贷 款已还清、处于困境和意外情况下的账户操作。例如,当车子在 75 号高速路 上奔跑的时候,撤销车子的操作将是粗鲁的。 在连续细化的过程中,我们从一个粗糙的抵押品体系,具体化到一个个 具体化的合约: (1)选择性地允许业主锁定和排除第三方 (2)允许债权人接入的秘密途径 (3A)只在违约一段时间且没有付款时秘密途径被打开; 并且 (3b)最后的电子支付完成后将永久地关闭秘密途径。 成熟的抵押品体系将针对不同的合约执行不同的行为。继续讨论我们的 例子,如果汽车的合约是一个租赁,最终付款将关闭承租人访问权; 购买了 债权,那就关掉债权人的访问。通过连续的重新设计方式,抵押品体系越来 越接近其合约的精髓:管理了覆盖财物,信息或被抵押的。可定性的、 不同 的合约条款,以及在财产在属性的技术差异,则引出不同的协议

2018-01-15

智投链 (IIC) 白皮书

区块链 (Blockchain) 区块链是一种分布式分类帐技术,基于去中心化的对 等网络,用开源软件把密码学原理、时序数据和共识 机制相结合,来保障分布式数据库中各节点的连贯和 持续,使信息能即时验证、可追溯、但难以篡改和无 法屏蔽,从而创造了一套隐私、高效、安全的共享价 值体系。 根据麦肯锡公司的一份区块链技术报告显示,从 2016 年开始,已有 超过 100 种区块链技术解决方案探索。在全球区块链产业中,中国成 为最活跃的市场。 工信部联合多个行业公司编写的《中国区块链技术和应用白皮书》 中 列举了金融服务、供应链管理、智能制造、文化娱乐、医疗健康、社 会公益和教育就业等区块链可以实现的六个典型应用场景,并分析了 区块链与云计算、大数据、物联网、下一代网络、加密技术和人工智 能等 6 大类新技术的关系

2018-01-15

中国区块链技术和应用发展白皮书

中国区块链技术和应用发展白皮书,当前,全球新一轮科技革命和产业变革持续深入,国际产业格局加速 重塑,创新成为引领发展的第一动力。在这一轮变革中,信息技术是全球研发 投入最集中、创新最活跃、应用最广泛、辐射带动作用最大的领域,是全球 技术创新的竞争高地,是引领新一轮变革的主导力量。 区块链作为分布式数据存储、点对点传输、共识机制、加密算法等技术 的集成应用,近年来已成为联合国、国际货币基金组织等国际组织以及许多 国家政府研究讨论的热点,产业界也纷纷加大投入力度。目前,区块链的应 用已延伸到物联网、智能制造、供应链管理、数字资产交易等多个领域,将为 云计算、大数据、移动互联网等新一代信息技术的发展带来新的机遇,有能 力引发新一轮的技术创新和产业变革。 为推动区块链技术和产业发展,信息化和软件服务业司指导中国电子 技术标准化研究院,联合蚂蚁金融云、万向控股、微众银行、乐视、万达网 络、平安科技等骨干企业,开展区块链技术和应用发展趋势专题研究,编撰 形成了《中国区块链技术和应用发展白皮书(2016)》。白皮书总结了区块链 发展现状和趋势,分析了核心关键技术及典型应用场景,提出了我国区块链 技术发展路线图和标准化路线图等相关建议。白皮书内容详实、分析透彻, 具有较好的参考价值。希望各界共同努力,积极把握区块链发展趋势和规 律,营造良好的发展环境,加速推动我国区块链技术和产业发展。 工业和信息化部

2018-01-15

(中文)Trinity Pitch Deck

(中文)Trinity Pitch Deck在线业务的性质要求资产能够快速私密地进⾏交易, 与传 统技术相⽐, ⽤户拒绝以牺牲性能作为代价。

2018-01-15

区块链白皮书

香港金融管理局区块链白皮书(英文)To many, “fintech” is a term simply associated with the trendy banking or payment services they use via their smartphone apps, or at the virtual counters of their banks. Internet banking and mobile payment applications are certainly important areas in the application of fintech, but they are far from the only ones. Other technologies, from artificial intelligence to big data analytics to virtual reality, are pushing out the possible frontiers of fintech every day. These technologies could bring a sea change to banking and payment services. The subject of this report – distributed ledger technology (DLT) – is just one key example of this beginning to happen. DLT is perhaps better known as “blockchain”. It is essentially technology that supports networks of databases that enable participants to create, disseminate and store information in a secure and efficient manner. While database technologies are not new, what makes DLT special is that these networks of databases can operate smoothly and securely without necessarily being controlled and administered by a central party that is known and trusted by every participant. The potential applications of DLT, as the fintech industry and many central banks and regulatory authorities soon found, are not limited to dealing in virtual currencies or commodities. The very fact that DLT allows information or records to be transferred and updated by network participants, and this to be done in a trustworthy, secure and efficient way, carries enormous potential. However, while the value proposition of DLT is gradually materialising, the use of DLT in financial services is also introducing new risks and giving rise to new legal and governance issues. These require in-depth study before its full potential can be realised. As a regulatory authority, we need to have a thorough understanding of the various governance, risk management and legal issues associated with DLT before its wider use begins in earnest

2018-01-15

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除