![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HDFS
奋斗的瘦胖子
作为一个码农小渣渣,开启执着的自驱学习之路!
展开
-
Java加载tensorflow模型(单机加载或分布式加载)
我们常用python进行tensorflow深度模型训练,然后,训练后的模型需要应用到web端调用,或者app应用调用,甚至分布式任务使用等等。在这些应用中java代码调用,是避免不了的。本文就介绍一下,java加载tensorflow模型的方式,分别单机调用和分布式调用。1.环境需要首先需要加载一些jar包,如果是maven项目在pom.xml中添加以下依赖。至于版本信息,切记一定要和你py...原创 2019-10-31 13:59:22 · 2566 阅读 · 0 评论 -
hadoop学习笔记:HDFS框架原理
学习大数据技术,就不可能避开hadoop,因为hadoop框架是分布式系统的基础。Hadoop是一个由Apache基金会所开发的分布式系统基础架构。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来...原创 2019-03-20 19:31:53 · 415 阅读 · 0 评论 -
数据仓分层的意义及如何优雅地设计数据分层
转载自:http://bigdata.51cto.com/art/201710/554810.htm为什么要分层我们对数据进行分层的一个主要原因就是希望在管理数据的时候,能对数据有一个更加清晰的掌控,详细来讲,主要有下面几个原因:1.清晰数据结构:每一个数据分层都有它的作用域,这样我们在使用表的时候能更方便地定位和理解。2.数据血缘追踪:数据使用过程中,我们最终给业务呈现的是一张能直接...原创 2019-05-07 19:39:54 · 3713 阅读 · 3 评论