- 博客(134)
- 资源 (21)
- 收藏
- 关注
RSS订阅原创 学习PHP步步高（开篇）
做了这么长时间java开发，突然用到了PHP，现在需要学习PHP了。那就把自己学习PHP的心路历程记录下来吧。如果可以帮助到别人，当然最好。这是自己的技术足迹。如果自己在这个路上成为大牛，那就可以把这个东东，作为PHP的一个学习路线了。
2016-03-12 11:46:01
680
转载 阿里云 mysql的远程访问问题
文章转载自：http://www.codesec.net/view/179165.html1.mysql的远程访问问题当linux服务器没有运行php、没安装phpMyAdmin的时候，远程管理mysql就显得有必要了。因为在CentOS下设置的，所以标题加上了CentOS，以下的命令在Debian等系统下应该也可以的。1.mysql -u root -p mysq
2016-03-12 00:37:00
2388
转载 搭建php运行服务器 win8.1系统安装iis+php5.3+mysql+ZendGuardLoader说明
win8.1系统安装iis+php5.3+mysql+ZendGuardLoader说明文章转载自：http://www.imxcz.com/win8-1-iis-php5-3-mysql-zendguardloader.html多谢！！！很多时候，我们需要本地的web环境，当然，已经有很多的继承套件可以使用，也经常会在虚拟机里安装个
2016-03-08 20:33:43
1949
转载 [Python]网络爬虫（12）：爬虫框架Scrapy的第一个爬虫示例入门教程
转载自：http://blog.csdn.net/pleasecallmewhy/article/details/19642329（建议大家多看看官网教程：教程地址）我们使用dmoz.org这个网站来作为小抓抓一展身手的对象。首先先要回答一个问题。问：把网站装进爬虫里，总共分几步？答案很简单，四步：新建项目 (Proj
2016-02-15 23:44:48
1073
转载 scrapy win8的安装使用
欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦：Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl
2016-02-12 22:12:21
969
原创 phoenix 查询hbase异常
2015-06-25 17:01:09,758 WARN [main] client.ScannerCallable (ScannerCallable.java:close(290)) - Ignore, probably already closedorg.apache.hadoop.hbase.UnknownScannerException: org.apache.hadoop.hbas
2015-06-26 10:32:28
5551
1
转载 mysql 异常
com.mysql.jdbc.exceptions.jdbc4.MySQLNonTransientConnectionException: No operations allowed after connection closed.转载自：http://www.cnblogs.com/interdrp/p/4177648.htmlcom.mysql.jdbc.excepti
2015-06-11 16:03:19
475
翻译 Performance Tuning Introduction drill 性能调优
翻译不好!勿喷！ You can apply performance tuning measures to improve how efficiently Drill queries data. 你可以使用性能调优的方法来提升drill查询数据的效率To significantly improve performance in Drill, you must have knowled
2015-06-02 21:12:03
1207
原创 drill 使用
1.查看当前foreman的node 节点：SELECT * FROM sys.drillbits WHERE `current` = true
2015-06-02 10:03:05
1041
原创 drill 连接hbase 问题
一直用drill 连接 hbase 查不出数据后来看了一下zookeeper的里面存储路径：/hbase-unsecure突然明白了。然后drill storage配置如下：{ "type": "hbase", "config": { "hbase.zookeeper.quorum": "host", "hbase.zookeeper.propert
2015-05-21 10:05:44
2765
2
转载 Linux查看CPU和内存使用情况
转载自：http://www.cnblogs.com/xd502djj/archive/2011/03/01/1968041.htmlLinux查看CPU和内存使用情况在系统维护的过程中，随时可能有需要查看 CPU 使用率，并根据相应信息分析系统状况的需要。在 CentOS 中，可以通过 top 命令来查看 CPU 使用状况。运行 top 命令后，CPU 使用状态会以全屏的方式显示
2015-05-11 09:23:13
701
转载 flume 集群测试场景
转载自：http://www.itnose.net/detail/6092961.html好久没写博客了。最近在研究storm、flume和kafka。今天给大伙写下我测试flume failover以及load balance的场景以及一些结论；测试环境包含5个配置文件，也就是5个agent。一个主的配置文件，也就是我们配置failover以及load bal
2015-05-06 08:19:56
2037
转载 Flume(NG)架构设计要点及配置实践
转载自： http://shiyanjun.cn/archives/915.htmlFlume NG是一个分布式、可靠、可用的系统，它能够将不同数据源的海量日志数据进行高效收集、聚合、移动，最后存储到一个中心化数据存储系统中。由原来的Flume OG到现在的Flume NG，进行了架构重构，并且现在NG版本完全不兼容原来的OG版本。经过架构重构后，Flume NG更像是一个轻量的小工具
2015-05-05 14:44:12
967
转载 storm 测试
Understanding the Internal Message Buffers of StormJUN 21ST, 2013When you are optimizing the performance of your Storm topologies it helps to understand how Storm’s internal message queues a
2015-04-30 09:59:15
1375
转载 org.apache.hadoop.hbase.coprocessor.AggregateImplementation 来统计表的行数
多谢楼主的分享！转载自：http://blog.csdn.net/xiao_jun_0820/article/details/25413919hbase自带了一个聚合coprocessor类：org.apache.hadoop.hbase.coprocessor.AggregateImplementation。使用该类可以count一张表的总记录数。当然在hba
2015-04-24 20:58:50
1166
原创 hbase down机 重启zookeeper 解决的异常
zookeeper.ZKAssign: regionserver:60020-0x14c82e2ede20abe, quorum=ip2181,ip:2181,ip:2181, baseZNode=/hbase-unsecure Transitioning f5c041d10f96ab0d350096398b3d492e from M_ZK_REGION_OFFLINE to RS_ZK_REGI
2015-04-23 09:23:51
3131
原创 linux 脚本使用
替换某个文件中的 摸个字符串sed -i "s/oldString/newString/g"`grep oldString -rl ss.sh`sed -i "s/analysis-framework-0.0.2-SNAPSHOT.jar/analysis-framework-0.0.3-SNAPSHOT.jar/g" `grep analysis-framework-0.0.2-SNA
2015-04-01 10:37:57
486
转载 Google Dremel数据模型详解
转载自：http://blog.csdn.net/dc_726/article/details/41627613首先简单介绍一下Dremel是什么，能解决什么问题。第二部分着重讲Dremel的数据模型，即数据结构。第三部分将谈一下在此数据结构上设计的算法。1 起源Dremel的数据模型起源于分布式系统的应用环境(Protocol Buffers，一种在Google内广泛
2015-03-31 16:23:49
1841
转载 从NSM到Parquet：存储结构的衍化
文章转载自： http://blog.csdn.net/dc_726/article/details/417776612014-12-06 19:21 1040人阅读 评论(0) 收藏 举报目录(?)[-]数据摆放结构水平的行存储结构垂直的列存储结构混合型的存储结构Parquet参考资料为了优化MapReduce及MR之前的各种工具的
2015-03-31 14:55:21
722
原创 异常 spark 运行 未解决
3/user/BlockManagerActor1#-1503002418]] after [30000 ms]}15/03/30 14:32:31 ERROR spark.ContextCleaner: Error cleaning broadcast 3akka.pattern.AskTimeoutException: Ask timed out on [Actor[akka.tcp:
2015-03-30 14:34:14
4462
4
原创 关于phoenix删表那些事儿
1.phoenix删除表 同样也会删掉hbase 中对应表。 测试：在hbase shell 中建表： create 'SCORE','A', 'B' put 'SCORE','Tom','A:M','5' put 'SCORE','Lilei','B:M','5' 结果：hbase(main):009:0> scan 'SCORE'
2015-03-30 09:44:08
13139
原创 待解决hbase异常
org.apache.hadoop.security.token.SecretManager$InvalidToken: access control error while attempting to set up short-circuit access to /apps/hbase/data/data/default/dataReportInfo/fd73633b33d70564224c
2015-03-26 11:21:15
4504
3
转载 Hadoop 权限管理
如下图，hadoop访问控制分为两级，其中ServiceLevel Authorization为系统级，用于控制是否可以访问指定的服务，例如用户/组是否可以向集群提交Job，它是最基础的访问控制，优先于文件权限和mapred队列权限验证。Access Control on Job Queues在job调度策略层之上，控制mapred队列的权限。DFSPermmision用户控制文件权限。目前版本中
2015-03-06 10:55:10
575
转载 Phoenix实现用SQL查询HBase
文章转载自：http://www.cnblogs.com/laov/p/4137136.htmlHBase，一个NoSQL数据库，可存储大量非关系型数据。HBase，可以用HBase shell进行操作，也可以用HBase Java api进行操作。HBase虽然是一个数据库，但是它的查询语句，很不太好用。要是能像使用Mysql等关系型数据库一样用sql语句操作HBas
2015-03-05 15:20:38
1730
转载 oozie on yarn oozie 4.0.1 hadoop2.3.0 安装笔记
欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦：Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl
2015-02-27 15:13:25
399
转载 Oozie Coordinator使用及详解
Oozie Coordinator使用及详解 2014-03-05 23:39:29 YanjunOozie所支持工作流，工作流定义通过将多个Hadoop Job的定义按照一定的顺序组织起来，然后作为一个整体按照既定的路径运行。一个工作流已经定义了，通过启动该工作流Job，就会执行该工作流中包含的多个Hadoop Job，直到完成，这就是工作流Job的生命周期。那么，
2015-02-27 11:45:04
1686
转载 Oozie工作流程定义详解
Oozie工作流程定义详解更多0 Oozie工作流程定义是一个DAG（Directed Acyclical Graphs）图，它由控制流节点（Control Flow Nodes）或动作节点（Action Nodes）组成，各个节点又是通过表征转移的箭线（transitionsarrows）互相连通。对于工作流一般对应存在流程定义语言，例如jBPM是jPDL，大
2015-02-27 11:38:14
1563
转载 oozie first step
分类： Hadoop oozie概述：oozie是基于hadoop的调度器，以xml的形式写调度流程，可以调度mr，pig，hive，shell，jar等等。主要的功能有Workflow： 顺序执行流程节点，支持fork（分支多个节点），join（合并多个节点为一个）Coordinator，定时触发workflowBundle
2015-02-27 11:05:03
543
转载 批量删除Redis数据库中的Key
转载：http://img.snail8.com/?p=502批量删除KeyRedis 中有删除单个 Key 的指令 DEL，但好像没有批量删除 Key 的指令，不过我们可以借助 Linux 的 xargs 指令来完成这个动作[plain] view plaincopyredis-cli keys "*" | xargs redis-cli
2015-02-13 16:36:28
759
转载 jstat 用法详解
jstat用法详解分类： jstat Linux2013-02-21 12:35 954人阅读 评论(0) 收藏 举报 1. jstat -gc pid 可以显示gc的信息，查看gc的次数，及时间。 其中最后五项，分别是young gc的次数，young gc的时间，full gc的次数，full gc的时间，g
2015-02-10 11:55:37
571
转载 sqoop使用中文手册
文章转载自：http://www.zihou.me/html/2014/01/28/9114.htmlSqoop中文手册8,038浏览 1条回复子猴：Sqoop在我们的实际工作中有一些应用，为了对Sqoop的使用有个更全面的了解，于是我花了一些时间将Sqoop的使用整理成了一份中文手册，我自认还是非常全面的，覆盖到了Sqoop所有的方面。虽然对每一个用法
2015-02-09 17:36:26
30987
转载 hive与hbase集成
转载自：http://blog.csdn.net/vah101/article/details/225973412014-03-30 18:55 717人阅读 评论(0) 收藏 举报目录(?)[-]简介存储handler使用方法列的映射多个列和列族Hive使用MAP类型映射整个列族违反规则的映射方式使用二进制列的例子
2015-01-30 15:27:22
698
原创 hbase 异常 未解决
2015-01-29 09:57:39,466 - ERROR [regionserver60020:ProtobufLogWriter@150] - Got IOException while writing trailerorg.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.LeaseExp
2015-01-29 11:31:52
2506
1
原创 hive运行tez
另外一个hive中使用tez的技巧：在Hive命令行中执行set hive.execution.engine=tez;会让hSQL以TEZ方式执行。缺省是使用MR 方式 ：set hive.execution.engine=mr;
2015-01-22 11:46:06
2046
转载 spark function api and example
转载自： http://homepage.cs.latrobe.edu.au/zhe/ZhenHeSparkRDDAPIExamples.html
2015-01-14 16:12:17
618
转载 storm on yarn 最简单安装笔记！！！私货哦！！！
http://blog.csdn.net/jiushuai/article/details/26693311 java高级交流群：37341439有storm 相关问题可以一起讨论哦！！一起学习！ storm on yarn下载地址：https://github.com/yahoo/storm-yarn 下载好的
2015-01-06 16:07:35
851
head_first_ajax.pdf
2013-06-03
ruby元编程.pdf
2013-06-03
让Oracle跑得更快 2 基于海量数据的数据库设计与优化.pdf
2013-05-30
让oracle跑到更快些.pdf
2013-05-30
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人