dh15303249535的博客

here转载于:https://www.cnblogs.com/Murcielago/p/4854031.html

修改Hibernate的配置文件hibernate.cfg.xml即可。原来：<property name="connection.url"> jdbc:mysql://localhost:3306/excel</property>修改后：<property name="connection.url">...

将Hadoop升级到了2.4.0，直接使用Eclipse的Hadoop插件新建了一个MapReduce Project，但是在Eclipse运行Hadoop程序时看不到进度信息，只输出如下内容：log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetri...

这篇博客我记录在了：http://segmentfault.com/a/1190000003100540转载于:https://www.cnblogs.com/Murcielago/p/4734905.html

例子1：class A { val x1: String = "hello" val x2: String = "mom" println("A: x1=" + x1 + ",x2=" + x2)}class B extends A { override val x2: String = "dad" println("B: x1=" + ...

今天在实现把Elasticsearch搜索出来的结果结合DataTables进行高亮显示的时候，出现了这个错误，解决办法是做如下改动：<script> $(document).ready(function() { $('#example').DataTable({ "bSort" : false ...

在eclipse中运行Hadoop程序时出现如下问题：log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory).log4j:WARN Please initialize the log4j system properly....

这篇博客我记录在了http://segmentfault.com/a/1190000003101351转载于:https://www.cnblogs.com/Murcielago/p/4734912.html

在执行Hadoop命令的时候会出现这样的警告：解决办法：在profile文件中添加：export JAVA_LIBRARY_PATH=${HADOOP_HOME}/lib/native这是在调用Hadoop里的库。具体可以参考www.cnblogs.com/gpcuster/archive/2011/02/17/1957042.html转载于:https://w...

索引一个文档，使用自己的IDhadoop@tinylcy:~$ curl -XPUT localhost:9200/website/blog/123 -d '> {> "title" : "My first blog entry",> "text" : "Just trying this out...",> "dat...

　　可以在Hadoop作业中插桩计数器来分析其整体运作。在程序中定义不同的计数器，分别累计特定事件的发生次数。对于来自同一个作业所有任务的相同计数器，Hadoop会自动对它们进行求和， 以反映整个作业的情况。这些计数器的数值会在JobTracker的Web用户界面中与Hadoop的内部计数器一起显示。　　计数器的典型应用是用来跟踪不同的输入记录类型，特别是跟踪“坏”记录。例如，我们得...

这一阶段主要是在学习Scala，知乎上说推荐先学习一下Haskell再学习Scala，但我觉得不一定要曲线救国。不过在学习过程中遇到的困难的确不少，好歹Scala是公认的其特性的复杂程度是要超过C++的嘛:-)我学习Scala的主要动机是想研究Spark，尽管Python和Java等都可以用来开发Spark应用，但是Spark本身就是一个Scala项目，而且Spark也不能算是...

毕设做到后半部分，需要实现将用户在一段时间(比如1天)内产生的新数据导入HDFS的功能，这样数据仓库中的数据才能和数据库中的数据同步，以及将新产生的推荐结果重新写回数据库，这样的话就与实际应用一致了在新建了一个PyDev项目后，需要如下操作(拣最主要的写)：模块的环境变量：# -*- coding:UTF-8 -*-#!/usr/bin/python...

因为Spark与Hadoop是关联的，所以在安装Spark前应该根据已安装的Hadoop版本来选择待安装的Sqark版本，要不然就会报“Server IPC version X cannot communicate with client version Y”的错误。 我安装的Hadoop版本为Hadoop2.4.0(下载)，选择的Spark版本为spark-1.2.0-bin-ha...

目的：向MySql数据库导入.txt文件，通过load命令来实现输入如下命令，报错：修改命令，依旧报错：可能原因（from mysql reference manual）： If LOAD DATA LOCALis disabled, either in the server or the client, a client that att...

昨天需要将Excel中的内容读取至MySQL中，我利用POI来实现这一需求，POI可以从这里下载。同时，如果要操作Excel2007，必须还要加入xmlbeans-2.3.0.jar。这是我要读取的Excel表的内容：注意表中数据存在日期、空格。定义一个Project类：package readexcel;public class Projec...

写Hadoop程序的时候在Mapper里遇到这个需求，上网查了下，做个记录：public static class MapClass extends MapReduceBase implements Mapper<Object, Text, IntWritable, Text> { @Override ...

在用Mahout做推荐引擎，用到数据库连接池，在eclipse下，遇到配置问题，其实很简单，但花了不少时间，做个笔记配置连接池将以下内容保存(相应位置做相应修改)为context.xml(自己新建)，放在web项目下的META-INF文件夹下：<?xml version="1.0" encoding="UTF-8"?><Context>...

我下载的tomcat版本是apache-tomcat-7.0.59.tar.gz ，解压在 /usr/local 下：给文件夹授权：重命名为tomcat7进入tomcat7下的bin文件夹，编辑文件catalina.sh添加内容如下：JAVA_HOME=/usr/lib/jvm/jdk1.7.0_75JAVA_...

刚才遇到一个问题：从本地文件系统上传一个文件夹至HDFS作为Hadoop程序的输入数据，但是程序报错，原因是Ubuntu针对每个.txt文件生成了.txt~备份文件，所以我要把这些备份文件批量删除然后再上传进入文件夹所在目录，然后执行命令：hadoop@myUbuntu:/usr/local/hadoop/movieinput$ find . -name '*.t...