- 博客(24)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 大数据学习——Elasticsearch 与 IK 分词器环境搭建
Elasticsearch 与 IK 分词器环境搭建搭建 Elasticsearch-7.0.0 环境安装配置文件配置问题及解决方法IK 分词器插件elasticsearch-head 的谷歌浏览器插件搭建 Elasticsearch-7.0.0 环境目前只使用一台装有 CentOS 7 的机器，在该机器上搭建了 Elasticsearch 环境，并且安装 elasticsearch-anal...
2019-06-07 15:39:41
601
1
原创 大数据学习——Kafka环境搭建
搭建 Kafka 环境 搭建 Kafka 0.11.0.0 环境安装Kafka 配置集群操作简单命令搭建 Kafka 0.11.0.0 环境我使用了4台虚拟机来搭建相对应的节点，具体情况如下：masterslave1slave2slave3NameNode√SecondaryNameNode√DataNode√√√Resou...
2019-03-11 21:22:44
410
原创 大数据学习——ZooKeeper环境搭建
搭建 ZooKeeper 环境 搭建 ZooKeeper 3.4.12 环境安装ZooKeeper 配置设置 ZooKeeper 日志输出到指定文件夹集群操作简单命令搭建 ZooKeeper 3.4.12 环境我使用了4台虚拟机来搭建相对应的节点，具体情况如下：masterslave1slave2slave3NameNode√SecondaryName...
2019-03-11 21:11:37
291
原创 Flume 学习 —— 案例四：Flume 监听本地文件，并将文件分别写至 HDFS 和本地文件夹中
案例四：Flume 监听本地文件，并将文件分别写至 HDFS 和本地文件夹中结构结构中有3个 Agent，分别是监控 File 文件的 a1，接收 a1 的 s1 并写入本地文件夹的 a3 和接收 a1 的 s2 并上传至 HDFS 的 a2创建配置文件1.在这里，我使用 Flume 监听的是 /usr/wang/data/Example4.txt 文件2.在 flume 的 conf...
2019-03-06 15:31:09
4984
原创 Flume 学习 —— 案例三：Flume 监听本地目录，并将目录下文件上传至 HDFS
案例三：Flume 监听本地目录，并将目录下文件上传至 HDFS创建配置文件1.在这里，我使用 Flume 监听的是 /usr/wang/data/upload 目录下的文件2.在 flume 的 conf 同级目录下创建 job 文件夹，并在 job 文件夹内创建 flume-dir-hdfs.confcd /usr/wang/flumemkdir jobcd jobvim flu...
2019-03-05 13:56:18
3476
原创 Flume 学习 —— 案例二：Flume 监听日志文件，并将文件上传至 HDFS
案例二：Flume 监听日志文件，并将文件上传至 HDFS创建配置文件1.在这里，我使用 Flume 监听的是 ResourceManage 节点的日志文件2.在 flume 的 conf 同级目录下创建 job 文件夹，并在 job 文件夹内创建 flume-file-hdfs.confcd /usr/wang/flumemkdir jobcd jobvim flume-file-...
2019-03-05 08:13:38
2611
原创 大数据学习——Flume环境搭建
搭建 Flume 环境 搭建 Flume 1.7.0 环境安装拷贝 Hadoop 的包到 Flume 的目录下分发配置完成的 Flume 到其它节点Flume 的使用搭建 Flume 1.7.0 环境我使用了4台虚拟机来搭建相对应的节点，具体情况如下：masterslave1slave2slave3NameNode√SecondaryNameNode...
2019-03-04 21:41:03
604
原创 Flume 学习 —— 案例一：Flume 监听端口，在控制台输出端口数据
案例一：Flume 监听端口，在控制台输出端口数据创建配置文件1.在 flume 的 conf 同级目录下创建 job 文件夹，并在 job 文件夹内创建 flume-telnet-logger.confcd /usr/wang/flumemkdir jobcd jobvim flume-telnet-logger.conf将下方文件拷贝到 flume-telnet-logger....
2019-03-04 21:36:49
2317
1
原创 大数据学习——Hadoop完全分布式环境搭建
搭建 Hadoop 2.7.2 完全分布式 搭建 Hadoop 2.7.2 完全分布式安装JDK安装 Hadoop设置免密钥登录解压 Hadoop 并配置环境变量配置相应的 Hadoop 的配置文件分发配置完成的 Hadoop 到其它节点格式化 NameNode启动 HSDF 和 YARN关闭 HDFA 和 YARN搭建 Hadoop 2.7.2 完全分布式我使用了4台虚拟机来搭建相对应的节点...
2019-03-04 16:16:11
1441
4
翻译 Sklearn之日常所见
20newsgroups 文本数据集原文链接：The 20 newsgroups text dataset20newsgroups 数据集包含大约18000个新闻组，其中的20个主题被分为两部分：一部分用于训练，另一部分用于测试。训练和测试的数据集的分割是基于日期的。该模块包括两部分 loaders ，第一个是 sklearn.datasets.fetch_20newsgrou...
2018-07-30 16:57:52
427
原创 CTeX使用
Latex加入脚注Latex \footnote{脚注内容} is as good software.Latex多处引用同一脚注ORL\footnote{http://blog.csdn.net/bear_kai\label{web}} andJaffe\textsuperscript{\ref {web}}. 注意网址中有下划线时，在latex中需要额外加一个反斜杠...
2018-07-30 16:52:42
16238
6
转载 网络表示学习论文阅读之HARP
HARP: Hierarchical Representation Learning for Networks 阅读笔记作者：Haochen Chen、Bryan Perozzi、Yifan Hu、Steven Skiena来源：AAAI 2018原文链接：HARP: Hierarchical Representation Learning for Networks摘要...
2018-05-13 15:50:34
1697
翻译 Sklearn之日常所见
sklearn.datasets.fetch_20newsgroups官方链接：sklearn.datasets.fetch_20newsgroups sklearn.datasets.fetch_20newsgroups(data_home=None, subset=’train’, categories=None, shuffle=True, random_state=42...
2018-04-11 15:41:11
180
翻译 网络表示学习论文阅读之SDNE
Structural Deep Network Embedding作者：Daixin Wang, Peng Cui, Wenwu Zhu刊物：KDD ’16, August 13-17, 2016, San Francisco, CA, USA原文链接：Structural Deep Network Embedding摘要几乎所有现有的网络表示方法采用的都是浅层模型。然...
2018-04-08 18:10:27
10726
1
翻译 Storm Topologies 示例——（结合Maven使用storm-starter）
结合Maven使用storm-starter学会使用Storm!安装MavenMaven （最好是版本3.x）的安装可以按照以下的步骤，Maven安装。在本地Build和install Storm jars如果您正在使用Storm的最新开发版本，例如，通过克隆git上的Storm， If you are using the latest development v
2017-07-20 16:53:32
1045
翻译 Storm Topologies 示例——（入门）
入门学会使用Storm!必备条件首先，你需要在你的电脑上安装‘java’和‘git’并且将它们的环境变量配置到你电脑的‘PATH’中。另外，在storm-starter中存在两个例子需要用到Python和Ruby。其次，确保你电脑上存在可用的storm-starter代码。Git/GitHub初学者初学者可能会用到下面的命令来下载最新的storm-starter代码并且更改到包含下载的代码的新目录。
2017-07-20 16:47:49
520
翻译 Storm Topologies 示例——（结合IntelliJ IDEA使用storm-starter）
Storm Topologies 示例学会使用Storm!目录入门结合Maven运行storm-starter结合IntelliJ IDEA运行storm-starter入门必备条件首先，你需要在你的电脑上安装‘java’和‘git’并且将它们的环境变量配置到你电脑的‘PATH’中。另外，在storm-starter中存在两个例子需要用到Python和R
2017-07-20 16:08:30
1256
原创 CentOS 7 配置Maven
CentOS 7 配置MavenMaven是一个高效的软件项目管理工具，通过Maven可以使得你构建项目时寻找Jar包变得简便，下面是在CentOS7 上安装和配置Maven的过程：安装前准备下载Maven包在CentOS 7中进行解压CentOS 7上Maven的配置Maven的验证安装前准备从Maven的下载页面可以看到，Maven需要有JDK的支持。在系统需求上写到：Maven 3
2017-07-20 15:39:49
7114
原创 JsonConfig的jsonConfig.setExcludes的用法
JsonConfig的jsonConfig.setExcludes的用法之前写一个小东西，当用JSONArray.fromObject()方法转一个对象集合时，因为对象中存在一对多的关系，一直抛出异常严重: Error executing FreeMarker template FreeMarker template error: Java method “org.apache.commons.
2015-11-28 22:30:39
7147
原创 myeclipse 10工作空间选择
如何使myeclipse 10启动时提示选择工作空间有的人可能在打开myeclipse时勾选了默认工作空间，那样的话，以后再次启动就会直接进入默认的工作空间，这时候如何修改使其打开时提示选择工作空间呢？首先打开myeclipse然后选择Window菜单，打开Preferences其次，找到General下的Startup and Shutdown,选中Workspaces在Work...
2015-11-21 14:26:23
468
原创 使用easyui控件中的easyui-datetimebox时间控件，获取时间值的方法
起始时间：终止时间：在js中获取开始时间值和结束时间值：function findPositions(){var beginTime=$("#startDatetime").datetimebox("getValue");var endTime=$("#endDatetime").datetimebox("getValue"); alert(b
2015-10-22 16:02:31
13204
4
原创 带条件查询离当前时间最近的一条记录
写项目时遇到从数据库中查询离当前时间最近的一条记录，然后上网查了一下，SELECT * FROM locationinfo WHERE DATETIME=(SELECT MAX(DATETIME) FROM locationinfo);然后，要根据用户的userid来查询，之前脑子混了，写的是SELECT * FROM locationinfo WHERE userid=1 and D
2015-09-23 20:02:17
2919
原创 ajax的url调用Struts 2的action方法，浏览器提示Not Found
1.这是因为url路径不对引起的，你可以用F12然后查看显示的url的值2.在ajax中的url中加入相应的路径这是原本的url：修改为：即可
2015-09-11 20:30:12
541
原创 jsp页面加载过程中执行struts 2的action
想要在jsp页面加载过程中调用struts 2的action方法1.需要在jsp页面中添加标签 2.然后在jsp页面中的中的第一行写上 ，其中name是调用struts中的action方法的名称，namespace是命名空间，executeResult是指是否把返回结果显示到本页面中，有false和true两种选择。
2015-09-11 19:45:16
915
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人