大数据
大哥的叔
这个作者很懒,什么都没留下…
展开
-
数据库的一些思考或者使用的需要
首先是对于数据库,一般都会用到,开始是自己在本地搭建一个小的单机数据库,然后进行一些增删改查的操作,然后或许会使用一些函数(包含存储过程),视图,等进行一些实操,这样之后觉得自己差不多了,然后发现面试或者工作中实际应用会存在很多问题。出现问题的原因是因为没有在实际的业务场景去操作。比如:一个小说网站的数据库是什么样,移动运营商的数据库是什么样,或者常用的电商数据库又是怎样,银行的数据库,博客的数据库等等这些不同业务场景的数据库使用就会有不同的数据库选择,还有不同需求:比如安全,数据量,数据时效等原创 2020-12-17 11:33:36 · 1075 阅读 · 1 评论 -
scala.tools.nsc.interpreter.ILoop.scala$tools$nsc$interpreter$ILoop$$loopPostInit()
scala.tools.nsc.interpreter.ILoop.scala$tools$nsc$interpreter$ILoop$$loopPostInit()原创 2020-09-16 11:10:01 · 7003 阅读 · 0 评论 -
com.alibaba.datax.common.exception.DataXException: Code:[FtpReader-14], Description:[与ftp服务器连接异常.].
服务器ftp连接错误原创 2020-09-02 20:02:09 · 8058 阅读 · 2 评论 -
大数据的浅显分析与假想
首先大数据目前没有一个明确的定义,普遍采用4v来描述volume(量大),variety(类型多)、velocity(处理速度快)、value(价值密度低)。一是数据体量巨大。百度资料表明,其新首页导航每天需要提供的数据超过1.5PB(1PB=1024TB),这些数据如果打印出来将超过5千亿张A4纸。有资料证实,到目前为止,人类生产的所有印刷材料的数据量仅为200PB。 二是数据类型多样...原创 2019-08-31 05:55:03 · 10893 阅读 · 0 评论 -
9000端口的问题 Hadoop伪分布式运行模式配置集群后启动集群namenode会过一会自动关闭
首先呢新人入坑错误较多因为之前的配置出了问题所以服务启动后会自动关闭9000端口的问题9000端口:是fileSystem默认的端口号:/opt/module/hadoop-2.7.2/etc/hadoop/core-site.xml也就是@后面的因为之前的配置文件是直接粘贴的所以出问题了任何一个命令或者配置都需要搞定它的意思...原创 2019-09-09 06:21:58 · 8472 阅读 · 0 评论