大数据
weixin_43106248
对高科技事物充满热情,个人公众号:人工智能十分钟
展开
-
警惕数值计算中的一个问题——不确定尾数
在python和很多编程语言中都会发生类似的状况这里我以python为例0.1+0.2结果:0.30000000000000004这对于常规的计算似乎影响不是很大,但是如果是深度学习算法这样庞大的数据计算可能就会产生蝴蝶效应,所以我们有必要知道它背后的原因及其解决办法。具体原因:浮点数间运算存在不确定尾数(不是BUG)那么为什么会出现不确定尾数呢?这涉及到了编程语言对数字运算的内部实现原理:计算机中所有数据本质上都要用二进制来存储以python语言为例,对于浮点数,采用53位二进制表原创 2020-12-08 17:01:38 · 1392 阅读 · 0 评论 -
分享一段ETL工具的使用心得(哲学高度)
现在有很多成熟的工具提供ETL功能,且不说他们的好坏。从应用角度来说,ETL的过程其实不是非常复杂,这些工具给数据仓库工程带来和很大的便利性,特别是开发的便利和维护的便利。但另一方面,开发人员容易迷失在这些工具中。举个例子,VB是一种非常简单的语言并且也是非常易用的编程工具,上手特别快,但是真正VB的高手有多少?微软设计的产品通常有个原则是“将使用者当作傻瓜”,在这个原则下,微软的东西确实非常好用,但是对于开发者,如果你自己也将自己当作傻瓜,那就真的傻了。ETL工具也是一样,这些工具为我们提供图形化界面,让转载 2020-12-03 17:51:42 · 213 阅读 · 0 评论 -
深度学习与大数据
——除了上帝,我只相信数据在数据呈指数增长的这个数字世界中,深度学习和大数据是最为热门的两个技术趋势。深度学习和大数据是数据科学领域相互关联的两个话题,而在技术发展方面,两者紧密关联且同样重要。数字数据和云存储遵循名为摩尔定律的通用定律,摩尔定律我们在之前就有提到过。因特尔创始人摩尔认为数据每两年就会翻一番,而存储该数据的成本却大致以相同的速率下降。这些丰富的数据产生了更多的特征和真理,因此为...原创 2019-09-13 14:59:14 · 3718 阅读 · 0 评论 -
阿里学习笔记
1.工作和生活是很难区分的,对于真正热爱的工作这是一定的。你在下班之余也会思考提及一些工作上面的事,这样的工作才会是有价值有意义的工作。同样学习也不是为了找工作而学的,而是去学你真正感兴趣的东西。2.韩国买家访问美国服务器的时间比访问上海要快很多,这是不符合常理的,因为地理位置上上海离韩国更近,造成这种问题的原因是,韩国访问上海要先访问美国在跳到其他国家之后才能到上海,这很不方便。3,...原创 2019-10-07 21:06:13 · 191 阅读 · 0 评论