- 博客(27)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 TableMapReduceUtil
使用TableMapReduceUtil犯了个错误，求大家指教：背景： 使用TableMapReduceUtil统计hbase表的数据条数；使用TableMapReduceUtil情况下，会由于表有多少个region就会启动多少个map，然后每个map的对应一个scan，每个scan对象会连接一次zk，这样就会导致对于region比较多的hbase表，zk被大量连接导致zk查询失败。如...
2019-03-19 17:20:20
801
原创 spark 提交任务 main后面参数如何输入？
直接上样例：spark-submit --master yarn com.demo.JavaPageRank /home/demo/SparkTest.jar "/tep/demo/file.txt" "2"--master yarn 为运行模式com.demo.JavaPageRank 主类名/home/demo/SparkTest.jar 包所在本地路径"/tep/demo...
2019-01-29 16:00:36
2995
转载 Hadoop二次排序及MapReduce处理流程实例详解
一、概述MapReduce框架对处理结果的输出会根据key值进行默认的排序，这个默认排序可以满足一部分需求，但是也是十分有限的，在我们实际的需求当中，往往有要对reduce输出结果进行二次排序的需求。对于二次排序的实现，网络上已经有很多人分享过了，但是对二次排序的实现原理及整个MapReduce框架的处理流程的分析还是有非常大的出入...
2019-01-22 14:42:00
249
转载 ubuntu14.04+cuda6.5+kaldi环境搭建
因为个人水平问题，这个环境搭建用了好长时间。最后虽然能用了，但是Ubuntu的图形界面进不去了，这里分享一下我安装的经验，欢迎大家批评指正。（如果有人有解决办法，欢迎指教，谢谢）先说一下我装的整体思路：一、更新显卡驱动，（因为Ubutnu下的驱动并非是英伟达官方的驱动，要更新为英伟达官方的驱动）二、安装cuda6.5。三、安装kaldi。一、更新显卡驱动1、首先
2015-11-09 19:38:41
1575
转载 timit运行示例二
1. 在网上下载timit语音库，解压放到/u01/kaldi/egs/timit/s5/data目录下jerry@hq:/u01/kaldi/egs/timit/s5/data/timit$ lsdoc readme.doc test TIMIT_phonemes.Table train2. 切换到timit主目录下 /u01/kaldi/egs/timit/s5，
2015-11-09 18:54:47
880
转载 timit运行示例一
TIMIT数据库介绍： TIMIT数据库由630个话者组成，每个人讲10句，美式英语的8种主要方言。TIMIT S5实例： 首先，将TIMIT.ISO中的TIMIT复制到主文件夹。1.进入对应的目录，进行如下操作：zhangju@ubuntu :~$ cd kaldi-trunk/egs/timit/s5/zhangju@ubun
2015-11-09 18:52:52
1906
转载 隐马尔可夫模型详解
隐马尔可夫模型 (Hidden Markov Model，HMM) 最初由 L. E. Baum 和其它一些学者发表在一系列的统计学论文中，随后在语言识别，自然语言处理以及生物信息等领域体现了很大的价值。平时，经常能接触到涉及 HMM 的相关文章，一直没有仔细研究过，都是蜻蜓点水，因此，想花一点时间梳理下，加深理解，在此特别感谢 52nlp 对 HMM 的详细介绍。 考虑下面交通灯的
2015-11-01 15:54:32
1205
转载 机器学习算法汇总：人工神经网络、深度学习及其它
学习方式根据数据类型的不同，对一个问题的建模有不同的方式。在机器学习或者人工智能领域，人们首先会考虑算法的学习方式。在机器学习领域，有几种主要的学习方式。将算法按照学习方式分类是一个不错的想法，这样可以让人们在建模和算法选择的时候考虑能根据输入数据来选择最合适的算法来获得最好的结果。监督式学习：在监督式学习下，输入数据被称为“训练数据”，每组训练数据
2015-10-23 19:13:38
695
转载 ubunt14.04安装cuda
首先验证你是否有nvidia的显卡（http://developer.nvidia.com/cuda-gpus这个网站查看你是否有支持gpu的显卡）：$ lspci | grep -i nvidia 查看你的linux发行版本（主要是看是64位还是32位的）：$ uname -m && cat /etc/*release 看一下gcc的版本：
2015-10-18 11:44:35
678
转载 语音信号处理
做了2年半的语音信号处理方面的研究了，主要从事算法方面的研究，从一开始的采用S变换提取语音特征进行说话人识别，到后来的语音增强算法研究，HTK学习，然后又回到语音特征提取分析，感觉学习语音信号处理应该有个循序渐进的过程，总结一下，也希望能有这方面的专业人士批评指正。 语音信号处理知识准备阶段：基础： 信号处理 数字信号处理 随机信号处理 数理统计 语音信号处理方面必看书籍
2015-10-10 16:53:19
1854
1
转载 MFCC(Mel 倒谱系数)
Mel倒谱系数Mel倒谱系数：MFCC Mel频率倒谱系数（Mel Frequency Cepstrum Coefficient）的缩写是MFCC，Mel频率是基于人耳听觉特性提出来的，它与Hz频率成非线性对应关系。Mel频率倒谱系数(MFCC)则是利用它们之间的这种关系，计算得到的Hz频谱特征。 用录音设备录制一段模拟语音信号后，经由自定的取样频率(如8000
2015-10-09 15:20:01
3662
转载 说话人识别
使用 sndpeek 识别说话者让计算机帮助您识别电话会议、podcast 和新闻直播中的说话者 级别： 中级Nathan Harrington (harrington.nathan@gmail.com), 程序员, IBM 2008 年 5 月 29 日使用 sndpeek 和自定义算法在预先录制的库中
2015-09-29 20:08:15
2757
转载 利用树莓派做智能小车
年初的时候看到@段念-段文韬 的这篇文章《使用树莓派制作的远程开门器》后，觉得硬件编程似乎没有想象的难。 之前认为硬件编程可能需要学习新的编程语言，需要特别的编程环境。然而树莓派使用Linux操作系统环境，只要Linux支持的编程语言 ，都可以成为你的选择。当语言环境不是问题的时候，对于我来说，我最感兴趣的部分是如何用树莓派来控制一些低速的外部设备，例如 ：继电器、小马达。 一般的PC并不提供
2015-07-21 21:13:35
16613
2
转载 树莓派学习笔记—— 源代码方式安装opencv
0.前言 本文介绍如何在树莓派中通过编译源代码的方式安装opencv，并通过一个简单的例子说明如何使用opencv。 更多内容请参考——【树莓派学习笔记——索引博文】1.下载若干依赖项 在开始安装之前，最好更新树莓派软件源。如果更新时间太长，请参考博文修改软件源网络地址——【树莓派学习笔记——修改树莓派软件源】
2015-06-27 11:09:24
678
转载 树莓派学习笔记——修改树莓派软件源
0 前言 本文说明如何修改树莓派软件源。如果使用raspbian系统，修改软件源的方法和ubuntu相同，可在http://www.raspbian.org找到最新的软件源镜像，修改/etc/apt/sources文件中的内容即可。 【相关博文】 【树莓派学习笔记——索引博文】——更多博文请关注。 【Linux学习笔记——Ubun
2015-06-26 21:26:14
427
转载 树莓派——显示设置
6.1.1 显示设置通常情况下，树莓派会自动检测显示器的类型并修改配置。但有时，自动检测的结果可能不正确。如果你的树莓派连接到电视上但没有任何显示的话，你要考虑手动修改树莓派的显示配置了。config.txt中的一些配置项是用来改变、改进视频输出的，这些配置项和其对应的值如下所示。警告 手动调整HDMI或复合视频输出设置可能会导致你的树莓派无法与显示器正常通信，最好是使用
2015-06-05 21:10:19
12493
原创 树莓派连接显示器，显示器一直没有反应怎么办
第一步：树莓派断电，把sd卡取出，用读卡器连接到电脑上，把里面的原有的config.txt备份成其他名字的文件第二步：重新建个config.txt 里面内容如下：hdmi_force_hotplug=1config_hdmi_boost=4hdmi_group=2hdmi_mode=9hdmi_drive=2hdmi_ignore_edid=0xa5000080di
2015-06-04 20:28:36
21882
12
转载 树莓派上手实战之SSH下配置VNC服务器实现远程桌面（可以实现开机自启动vncserver）
VNC是linux下面常用的远程桌面，用它可以在windows或者unix主机上方便的通过网络操作远程主机而不需要一个额外的显示器，非常实用。这篇教程将会详细讲解安装配置VNC服务器开启远程桌面服务的全部过程。首先 假设我们已经知道了树莓派的ip地址，并且通过ssh远程连接到了树莓派。用默认账户pi登录，在ssh命令终端下输入命令 sudo apt-ge
2015-06-04 09:06:56
2609
转载 树莓派（raspberry）使用经验————设置有线和无线ip
设置树莓派的网络配置，上次介绍了如何用SSH链接管理，但是我们的树莓派默认状态下的IP设置时使用DHCP方式分配的，现在要把它设置静态的固定IP地址，省得下次IP地址变换时要重新查找IP地址工具/原料SSH链接软件方法/步骤直接在命令行中输入：sudo nano /etc/network/interfa
2015-06-03 21:36:30
2758
转载 树莓派启动方法大全
Step1准备SDSD卡就相当于pc的硬盘。要学习树莓派，要先给它装一个系统，不过不是在树莓派上一步一步安装。而是直接把系统的镜像写到SD卡上。我用的是ubuntu，直接用DD来写镜像。步骤如下：1、先到官网下载树莓派的系统镜像，我下的是2012-12-16-wheezy-raspbian.img 解压后大小为1.9G。2、把SD卡连到电脑上，用df-h命令
2015-06-03 21:02:25
3211
转载 VS2010下如何配置CUDA4.2
经过各种努力，终于搞定一个CUDA工程。闲话少说，进入正题。首先，新建一个win32 console application。记住，要建一个空的工程，不能带预编译头。然后，添加.cu文件。下面就是各种繁琐的环境配置了。第一：右键单击工程的名字，在弹出的快捷菜单中，选择 Build Customization
2015-05-09 12:43:00
326
转载 linux下如何创建库文件
一、重要概念。 1.1 库文件。库文件实际上是使用共享程序代码的一种方式。库文件分为静态库和动态库。linux下静态库文件的后缀为.a 动态库的后缀为.so。 windows下的静态库文件的后缀为.lib。动态库文件的后缀为.dll。 1.2 静态库。程序编译一般需经预处理、编译、汇编和链接几个步骤。在我们的应用中，有一些公共
2015-04-12 10:27:01
503
转载 Linux makefile 教程 非常详细，且易懂
最近在学习Linux下的C编程，买了一本叫《Linux环境下的C编程指南》读到makefile就越看越迷糊，可能是我的理解能不行。 于是google到了以下这篇文章。通俗易懂。然后把它贴出来，方便学习。 后记，看完发现这篇文章和《Linux环境下的C编程指南》的makefile一章所讲述的惊人的相似，只是这篇文章从一个实例切入，在有些地方比
2015-04-12 10:26:19
371
转载 windows和linux双系统，设置默认启动项
在终端里输入：sudogedit /boot/grub/grub.cfg先装windows而后装linux系统，默认启动项会非常多，执行上面的命令后，会打开一个文档，里面代码如下： ---------------------------------------------------------------------------------------------------------
2015-04-08 14:38:42
2299
原创 jetson tk1 图形界面初始化
1、login: ubuntu2、password:ubuntu3、ls 显示NVIDIA-INSTALLER4、cd NVIDIA-INSTALLER5、ls 显示installersh6、sudo ./installersh7、密码：ubuntu8、待显示success输入 sudo reboot 等待重启。
2015-03-15 21:34:09
858
原创 ubuntu 输入法安装
安装fcitx，ubuntu软件中心肯定是找得到的。或者是直接输入命令sudo apt-get install fcitx-table-wbpy sudo apt-get install fcitx-googlepinyin配置fcitx有两种方法，（1）在命令行中输入fcitx-config-gtk3出来add input method找到相应的输入法添加进去.（2）在
2015-03-15 16:50:14
282
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人