自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(17)
  • 资源 (1)
  • 收藏
  • 关注

原创 Tensorflow中的常量、变量、Fetch、Feed、Session

在tensorflow中,常量通过constant函数来定义 变量通过Variable函数来定义(变量要用run一下initialize_all_variables()初始化) Session在tensorflow中运行graph的上下文,Session运行结束后,需要关闭。 Fetch对多个操作节点取值 placeholder定义占位符 Feed给占位符赋值...

2019-05-09 10:17:01 285

原创 Pycharm、Anaconda、tensorflow开发环境配置

因为直接在windows环境中使用pip install tensorflow安装存在各种各样得问题,因此建议安装Anaconda得python环境,然后通过Anaconda安装tensorflow并pycharm配置使用。下载最新版本得Anaconda到Anaconda官网https://repo.anaconda.com/archive/下载最新的Anaconda安装包,如图安装...

2019-05-09 09:33:59 1377

转载 Redis常见应用场景介绍

在主页中显示最新的项目列表在Web应用中,“列出最新的XXX”非常普遍,这通常会带来可扩展性问题。 类似的问题就可以用Redis来解决。比如说,一个Web应用想要列出用户贴出的最新20条评论。在最新的评论边上我们有一个“显示全部”的链接,点击后就可以获得更多的评论。假设数据库中的每条评论都有一个唯一的递增的ID字段,就可以使用分页来制作主页和评论页,使用Redis的模板,每次新评论发表时,我们会将它

2016-08-29 17:31:36 673

原创 java正则表达式替换

String src = "{\"clientID\": 1001,\"timestamp\": \"1400743326346\",\"data\": [{\"loadStartTime\": \"20140522152004\",\"firstScreenTime\": \"1.987\",\"pageTotalTime\": \"92.161\",\"dnstime\": \"0.006\"

2014-07-14 09:54:07 846

原创 项目中的HBase优化

1      HBase优化1.1    配置优化l  Zookeeper会话过期时间,zookeeper会话过期默认4~40s。当业务系统繁忙时很容易就过期被断开,所以需要加大zookeeper的会话过期时间(60~180s)SessionTimeoutl  Zookeeper连接会话数,Zookeeper默认允许单IP连接会话60,当多线程多时很容易被拒绝连接,所以需要加大

2014-06-30 15:29:48 733

原创 hadoop distcp(分布式复制)命令

distcp(分布式复制)的有用程序,能从hadoop的文件系统并行复制大量数据,distcp一般用于在两个HDFS集群中传输数据

2014-04-13 08:19:59 3422

原创 haoop执行reduce后合并结果文件

Configuration conf = new Configuration();  FileSystem fs = FileSystem.get(conf);  FSDataOutputStream out = fs.create(new Path(    "/output/result/patents/result.txt"));  FileStatus[] srcs = fs

2014-04-11 11:23:52 1613

原创 eclipse 提交hadoop2 的mapreduce程序

1 、下载myeclipse10 安装完成后,下载hadoop-eclipse-plugin-2.2.0.jar文件放入×MyEclipse 10\dropins目录下,并在Window/Preference中配置hadoop安装路径。本机解压缩hadoop安装包即可。重启eclipse2 、配置map/reducer,其中map/reducer(v2)Master端口为8031,DFS Ma

2014-04-10 12:12:48 3644

原创 hbase-0.94.16搭建eclipse源代码工程

在eclipse搭建hbase-0.94.16的工程,执行如下步骤:1 下载hbase-0.94.16.tar.gz文件2 创建maven project,选择quick start模式。输入group id,artifact id等3 拷贝hbase-0.94.16.tar.gz目录中的文件夹到工程目录,注意目录平级。4 选择src目录下的src/main/java   src/

2014-02-18 17:46:08 1102

原创 jar包中引入第三方jar时MANIFEST.MF注意事项

如果系统把程序打包成jar文件,并且该jar文件依赖了比较多的第三方jar包,则会出现比较多的问题:1 在Class-Path中指明依赖的jar包,如果jar文件存放在lib目录下存在两种放置方式:   a 如果是在你的jar文件中打入了lib目录,则Class-Path中指明的目录是lib/2.jar lib/2.jar    b 如果是在你的jar文件所在目录平级存放lib目录,与

2014-02-18 17:29:06 9632 1

原创 eclipse远程调试mapreduce程序

编程调试环境:window eclipse hadoop运行环境:linux(vmware)hadoop版本:1.2.1hadoop编程涉及两个方面,一是hdfs分布式文件存储程序、一是mapreduce分布式数据处理程序。因为习惯在window下使用eclipse开发程序,但是hadoop的程序需要运行在hadoop环境中,所以希望能够在window下eclipse编程并能够

2013-12-27 17:13:15 1839

原创 eclipse远程调试hdfs程序

编程调试环境:window eclipse hadoop运行环境:linux(vmware)hadoop版本:1.2.1hadoop编程涉及两个方面,一是hdfs分布式文件存储程序、一是mapreduce分布式数据处理程序。因为习惯在window下使用eclipse开发程序,但是hadoop的程序需要运行在hadoop环境中,所以希望能够在window下eclipse编程并能够

2013-12-27 16:55:38 875

原创 python实现大数相乘

大数相乘使用数组list记录数据,类似小学时做乘法计算时竖着的计算方法:1、把数据读入数组,  并实现数组逆转。数组顺序0~n与位数个位、十位....一致2、创建存储结果数组,长度默认为两个被乘数长度之和3、按位相乘并存储在对应的结果数组中5、执行进位操作,结果数组从0开始,如果大于9则进位到下一位并获取新结果6、结果执行逆序  def multipy(aaa,bbb)

2013-03-10 17:03:16 7351

原创 setDefaultKeyMode方法

 在Activity中的onCreate()方法中使用setDefaultKeyMode()可以做到在当前activity中打开拨号器、执行快捷键、启动本地搜索、启动全局搜索;setDefaultKeyMode(Activity.DEFAULT_KEYS_SEARCH_LOCAL);setDefaultKeyMode(Activity.DEFAULT_KEYS_DIALER);se...

2012-10-07 11:21:08 113

原创 依赖、关联、聚合、组合

依赖:类A中的方法使用了类B的对象,可以是参数、临时变量等。关联:类A中定义了类B的对象,类B作为类A的变量即是关联。聚合:类A拥有类B的对象,并且类B是类A的组成部分,如公司与员工组合:类A拥有类B的对象,并且类B是类A的组成部分且类B的生命周期由类A控制。如车和车轮,没有类A则类B没有多大意义...

2011-04-05 11:05:15 102

原创 命令模式(Command)

命令模式包含如下角色:1、客户调用类Client2、调用接口类(边界类,于客户调用类交互)Invoker3、命令接口(Command)4、具体命令(AddCommand、DeleteCommand、ModifyCommand...)5、命令接收者接口(Reciever)6、具体命令接收者(AReciever、BReciever...)过程1:1、客户调用类Cli...

2011-03-12 16:48:21 118

原创 java中的桥梁模式(Bridge)理解

Bridge定义 : 将抽象和行为划分开来,各自独立,但能动态的结合.首先一个功能类的继承关系很多。如一个公司有如下种类的继承,服装公司、汽车公司、宝马汽车公司、女式服装公司等其次功能类有共同的行为,如服装公司有生产、销售,汽车公司也有生产销售最后,把共同的行为抽象出来,形成独立的类如:class Corp{public void produce();publi...

2010-11-18 13:02:44 226

Hadoop_in_Practice

hadoop学习的经典之作,受用1.2的版本写作。

2013-12-27

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除