DangerousRoy-CSDN博客

转载【转载】迷之 crontab 异常：不运行、不报错、无日志

问题说明 :谷歌云服务 gce debian实例crontab不运行，经查看发现crontab时区与系统时区不一致，系统时区为utc+8,crontab为utc。修改后重启cron服务没有立即生效，第二天查看crontab服务时区已正常，但仍无法运行任务，查阅到以下文章，问题解决。######1、背景前几天新同学入职，一不小心将跳板机上的 crontab 清空了，导致凌晨一大批...

2018-10-23 10:26:48 931

原创 python pip设置代理

python 安装 urllib2 库时，pip install urllib2 报错如下， Retrying (Retry(total=1, connect=None, read=None, redirect=None)) after connection broken by 'ProxyError('Cannot connect to proxy.', OSEr

2016-10-25 16:43:18 19897 3

转载 Solr- How to make indexing faster - Lucene-java Wiki

How to make indexing fasterHere are some things to try to speed up the indexing speed of yourLucene application. Please see ImproveSearchingSpeed for how to speed up searching.Be sure

2016-06-21 18:34:26 497

原创 Ansible简单操作

Ansible简单操作ansible 配置用户组文件 /etc/ansible/1. copy ：复制文件(夹)ansible usrgroup -m copy -a "src=/usr/lib/solr/solr-4.10.2-replica/ dest=/usr/solr/ owner=hdfs group=hadoop"2. s

2016-06-17 11:36:57 573

原创 jvisualvm 添加 jstatd 连接，远程监控Jvm

1.在java安装目录：/usr/java/default/lib新建文件 all.policy：grant codebase "file:/usr/java/jdk_solr/lib/tools.jar" { permission java.security.AllPermission;};2.对应的目录执行：/usr/java/default

2016-06-17 11:21:40 972 1

原创 Hive select 过程中不走mapreduce，join内存溢出

问题：Hiveselect 过程中没走mapreduce，本地扫描hdfs，最后报内存不足任务失败解决：hive语句前增加 set hive.auto.convert.join=false;set hive.ignore.mapjoin.hint=false;SET hive.auto.convert.join=false; 关闭自动转化MapJoin，默认为true;

2016-06-17 10:55:58 3200

原创 Linux 文本字符串替换和字符串切割处理

一. 文本替换1. perl -p -i -e "s/filepath/20160617/g" $configFile filepath：被替换串20160617：替换内容$configFile：文件被替换串或替换串中有’/’用’\’转义，加 ‘ ‘没有用perl -p -i -e 说明见：http://www.cnblogs.com/avenwu/arc

2016-06-17 10:44:07 3434

转载鉴定令牌不再有效，需要新的鉴定令牌解决 [ User account has expired You (sumitgoel)are not allowed to ac ]

Cron is a daemon in Linux that executes scheduledcommands. Cron looks for /var/spool/cron directory for crontab files which arenamed after user accounts in /etc/passwd file and then found crontabs are

2016-06-07 11:57:02 3147

转载 JVM GC算法 CMS 详解

前言CMS，全称Concurrent Low Pause Collector，是jdk1.4后期版本开始引入的新gc算法，在jdk5和jdk6中得到了进一步改进，它的主要适合场景是对响应时间的重要性需求大于对吞吐量的要求，能够承受垃圾回收线程和应用线程共享处理器资源，并且应用中存在比较多的长生命周期的对象的应用。CMS是用于对tenured generation的回收，也就是年老代的回收，目

2016-04-25 13:40:25 434

转载 Lucene的索引文件格式

原文地址： http://www.cnblogs.com/forfuture1978/archive/2009/12/14/1623597.html [ 原博客具有很强学习价值，有Hadoop原理与代码分析：MapReduce源码分析总结，Map-Reduce的过程解析，HDFS读写过程解析， Lucene原理与代码分析：Lucene 原理与代码分析完整版，Lucene的

2016-01-08 11:50:17 572

转载 Solr简介（目录结构）-节选

原文地址：http://www.cnblogs.com/xia520pi/p/3625232.html1、Solr简介　　Solr是一个高性能，采用Java5开发，基于Lucene的全文搜索服务器。同时对其进行了扩展，提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展并对查询性能进行了优化，并且提供了一个完善的功能管理界面，是一款非常优秀的全文搜索引擎。　　Sol

2016-01-04 16:59:56 545

转载 SolrCloud分布式检索时忽略宕机的Shard

原文地址：http://www.solr.cc/blog/?p=44SolrCloud分布式检索时忽略宕机的Shard“no servers hosting shard:503” 加入下面参数，只从存活的shards获取数据：shards.tolerant=true例如：explicittrue10text

2015-12-25 10:47:17 606

转载全文检索引擎Solr系列—–全文检索基本原理

原文地址：http://itindex.net/detail/50759-%E5%85%A8%E6%96%87%E6%A3%80%E7%B4%A2-%E5%BC%95%E6%93%8E-solr场景：小时候我们都使用过新华字典，妈妈叫你翻开第38页，找到“坑爹”所在的位置，此时你会怎么查呢？毫无疑问，你的眼睛会从38页的第一个字开始从头至尾地扫描，直到找到“坑爹”二字为止。这种

2015-12-25 10:45:05 455

转载 Solr调优参考

原文地址：http://itindex.net/detail/37725-solr共整理三部分，第一部分Solr常规处理，第二部分针对性性处理，前者比较通用，后者有局限性。务必根据具体应用特性，具体调节参数，对比性能。第三部分 solr查询相关的具体应用需要全面去把控，各个因素一起起作用。第一部分 E文连接 http://wiki.apache.org/solr/S

2015-12-25 10:41:40 407

转载 Shell脚本中变量$

$0 这个程式的执行名字$n 这个程式的第n个参数值，n=1..9$* 这个程式的所有参数,此选项参数可超过9个。$# 这个程式的参数个数$$ 这个程式的PID(脚本运行的当前进程ID号)$! 执行上一个背景指令的PID(后台运行的最后一个进程的进程ID号)$? 执行上一个指令的返回值 (显示最后命令的退出状态。0表示没有错误，其他任何值表明有错误)$- 显示shell使用的当前选项

2015-09-09 13:59:31 430

转载 JSP、servlet、SQL三者之间的数据传递

背景：目前业界很流行的WVC（model-view-control）开发模式，具体暂可理解为模型是javaBean，视图是JSP，控制是servlet。 web的运行机制：数据首先在jsp上被展示出来，用户看到页面后

2015-06-18 15:11:37 1146

转载 MySQL存储过程

MySQL存储过程详解 mysql 存储过程(2010-12-13 10:59:38)转载▼标签：it分类： mysqlmysql存储过程详解1. 存储过程简介我们常用的操作数据库语言SQL语句在执行的时候需要要先编译，然后执行，而存储过程（Stored Procedure）是一组为了完成特

2015-06-10 09:08:19 483

转载 java中判断日期格式是否正确

import java.util.Date;import java.util.regex.Matcher;import java.util.regex.Pattern;public static boolean isValidDate(String sDate) { String datePattern1 = "\\d{4}-\\d{2}-\\d{2}";

2015-05-28 16:10:16 5459

转载 Java String和Date的转换

String—>Date方法一：String dateString = "2012-12-06 "; try { SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd "); Date date = sdf.parse(dateString); } catch (ParseEx

2015-05-28 14:20:34 531

转载 java解析逻辑表达式

java解析逻辑表达式（执行逻辑运算符的字符串）import javax.script.ScriptEngine;import javax.script.ScriptEngineManager;public class expression{ public static void main(String[] args) throws Exception {

2015-05-28 14:12:11 5243

转载 java中的字符串分割函数

java中的split函数和js中的split函数不一样。 Java中的我们可以利用split把字符串按照指定的分割符进行分割，然后返回字符串数组，下面是string.split的用法实例及注意事项： java.lang.string.split split 方法将一个字符串分割为子字符串，然后将结果作为字符串数组返回。 stringObj.split([separato

2015-05-28 14:09:43 500

DangerousRoy的博客