presto支持superset和hue

1. superset 格式:presto://hive@localhost:port/<presto_catalog_name>/<hive_db_name> 案例:presto://hive@10.10...

2018-08-20 18:10:28

阅读数 494

评论数 0

hive数据库权限控制

1. 登陆hue,右上角 admin->Manage Users 增加Groups:business 设置权限:beeswax.access:Launch this application(2) 增加User:xcy,在Step2 添加Group[business] ...

2018-08-20 16:01:16

阅读数 590

评论数 0

hive与mongodb连接

1.下载 wget http://repo1.maven.org/maven2/org/mongodb/mongo-hadoop/mongo-hadoop-hive/2.0.2/mongo-hadoop-hive-2.0.2.jar wget http://repo1.maven.org/mav...

2018-08-03 16:53:17

阅读数 724

评论数 0

hiveserver2 HA配置

1. 修改hive-site.xml<property><name>hive.server2.support.dynamic.service.discovery</name&amp...

2018-05-30 14:10:59

阅读数 174

评论数 0

CDH集群部署与设置

1. ctdn-1vi /etc/host#127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4#::1         localhost localhost.localdomain loca...

2018-04-08 16:35:57

阅读数 1031

评论数 0

NLP工作内容总结

词法分析(分词器实现,关键词提取,命名实体名的识别)句法分析(MaxEnt 句法依存关系分析)语义分析知识图谱虚拟助理(智能问答)深度学习用户意图识别算法:主要对大街网智能搜索算法进行改造和改进。完成了query plan 词典优化。建立ngram语言模型并改进搜索词典。完成行业实体名的识别算法人...

2018-04-08 16:31:48

阅读数 268

评论数 0

elasticsearch与Hadoop

1. 安装sdkyum -y install unzipyum -y install zipcurl -s "https://get.sdkman.io" | bash新终端下执行:source "$HOME/.sdkman/bin/sdkma...

2018-04-08 13:03:36

阅读数 779

评论数 0

以太坊部署实践

1. 准备1.1 CentOS7通过yum安装nodejs和npmcurl --silent --location https://rpm.nodesource.com/setup_5.x | bash -yum install -y gcc-c++ makeyum install -y node...

2018-04-08 13:00:26

阅读数 337

评论数 0

Elasticsearch总结

1. 增删改查创建indexcurl -XPUT http://10.11.8.32:9200/movielens建立索引映射curl -XPOST http://10.11.8.32:9200/movielens/movies/_mapping -d'{        "pro...

2018-04-08 12:52:17

阅读数 100

评论数 0

geth

1. attach  假如已经启动eth,那么想共享同一个服务该怎么办? geth attach "/Users/admin/bin/ethdata/geth.ipc" 2. eth开发 web3.js,它是一个eth区块的服务,可以实现eth及token的所有功能,包...

2018-01-25 12:47:39

阅读数 2472

评论数 1

区块链以太坊应用总结

1.以太坊 以太坊是利用区块链技术开发的通用计算机,简单地说,以太坊=区块链+智能合约,开发者在以太坊上可以开发任意的应用,实现任意的智能合约。从平台的角度来讲,以太坊类似于苹果的应用商店;从技术角度来讲,以太坊类似于一个区块链操作系统。 2.私有链 在以太坊的公有链上部署智能合约、发起交易...

2018-01-25 11:42:33

阅读数 808

评论数 0

tensorflow多节点的分布式

程序实例: #!/usr/bin/env python import tensorflow as tf import numpy as np # Flags for defining the tf.train.ClusterSpec tf.app.flags.DEFINE_strin...

2017-12-25 16:57:45

阅读数 324

评论数 0

tensorflow的分布式

1.在指定设备上跑计算 TensorFlow支持使用 allow_soft_placement来将不能放在GPU的操作,自动放置到CPU来进行运算。 import tensorflow as tf # # 通过tf.device将运算指定到特定的设备上。 with tf.dev...

2017-12-25 16:26:12

阅读数 233

评论数 0

tensorflow如何做到分布式计算

I. 从简单开始,首先是单机单卡: 服务器是虚拟机,只有CPU,下面程序分别计算加法、乘法 #coding=utf-8 #单机单卡 #对于单机单卡,可以把参数和计算都定义再gpu上,不过如果参数模型比较大,显存不足等情况,就得放在cpu上 import  tensorflow as tf wit...

2017-12-25 12:20:17

阅读数 1393

评论数 4

Linux部署Apache

0.  yum -y install gcc yum -y install gcc-c++ yum -y install compat-gcc-44 yum -y install compat-gcc-44-c++ 1. wget https://ftp.pcre.org/pub/...

2017-11-23 17:44:18

阅读数 132

评论数 0

Linux上部署neo4j

1. 安装Java 1.8 2. 下载neo4j wget http://we-yun.com/download/Neo4j-Releases/3.2.0/neo4j-communitygz 3. 解压 tar zxvf neo4j-community-3.2.0-unix.tar.gz 4....

2017-11-03 10:56:08

阅读数 4226

评论数 0

Windows环境下部署neo4j

部署 1. 下载windows环境下的安装包neo4j-community-3.2.0-windows-chs-1.0.0.zip 网址:http://www.we-yun.com/index.php/blog/releases-56.html 2. 解压,比如目录为E:\neo4j 3....

2017-11-01 16:11:32

阅读数 5230

评论数 0

presto集群部署

presto集群规划 train01:调度节点 train01~train04:worker节点 train01~train04: 1. 下载presto-server-0.100.tar.gz之各个服务器节点的/opt 2. tar zxvf presto-server-0.1...

2017-08-14 10:44:12

阅读数 287

评论数 0

ML之LogisticRegression

MLlib 线性回归 1. 数据输入: tips.csv 1,1,1 1,1.1,0.9 1,1,1.2 2,10,11 2,9,10 2,10,12 3,50,52 3,49,50 3,48,49 from pyspark.ml.linalg import Vectors from pyspar...

2017-07-31 15:54:40

阅读数 844

评论数 0

MLLib之LogisticRegression

MLlib 线性回归 1. 数据输入: case_data.txt 1,1 1 1,1.1 0.9 1,1 1.2 2,10 11 2,9 10 2,10 12 3,50 52 3,49 50 3,48 49 from pyspark.mllib.linalg impo...

2017-07-31 12:04:49

阅读数 129

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭