- 博客(7)
- 收藏
- 关注
RSS订阅原创 大数据的时代
实时或近实时的分析处理（例如实时推荐系统、金融风控、物联网监控等），这些对数据的使用方式上需要对大量数据进行计算，而不再是关系型数据库中那种小批量的增删改查，这时候即使是用了组合式的存储来存放数据，要去各种存储上跑计算任务再汇总到一起，明显是很低效的，这时候上大数据技术就是十分合理的。在大数据系统中由于其存储采用了分布式的架构，计算任务不再是单点的，而是分布式的，是要分发到集群中的各个存储节点上去的，由各个结点计算后汇总出最终的结果。是的，这就是大数据中的存储系统，分布式文件系统——HDFS。
2024-04-10 11:47:21
330
原创 大数据时代
大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到无法透过主流软件工具，在合理时间内达到撷取、、处理、并整理成为帮助企业经营决策更积极目的的资讯。在及肯尼斯·库克耶编写的《》中大数据指不用随机分析法（）这样捷径，而采用所有数据进行分析处理。（大量）、（高速）、（多样）、（低价值密度）、（真实性）。对于“大数据”（Big data）研究机构Gartner给出了这样的定义。“大数据”是需要新处理模式才能具有更强的决策力、发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。
2024-04-10 11:44:00
525
原创 大数据与Hadoop
传统的关系型数据库主要是采用行式存储 的方式进行数据的存储，数据读取的特点是按照行的粒度从磁盘上读取数据记录，然后根 据实际需要的字段数据进行处理，如果表的字段数量较多，但是需要处理的字段较少（特 别是聚合场景），由于行式存储的底层原理，仍然需要以行（全字段）的方式进行数据的查 询。随着大数据时代的来临，处理和分析海量数据成为了一项重要的挑战。在大数据系统中由于其存储采用了分布式的架构，计算任务不再是单点的，而是分布式的，是要分发到集群中的各个存储节点上去的，由各个结点计算后汇总出最终的结果。
2024-04-10 11:38:18
1125
原创 大数据与Hadoop
1.大数据概述1.1.大数据的概念大数据即字面意思，大量数据。那么这个数据量大到多少才算大数据喃？通常，当数据量达到TB乃至PB级别时，传统的关系型数据库在处理能力、存储效率或查询性能上可能会遇到瓶颈，这时考虑采用大数据技术是合理的。当然可以通过分库分表等方式来让关系型数据库来强行抗住这个量级，所以数据量大外数据结构是不是够杂（结构化、半结构化、非结构化数据）也是要不要上大数据技术的重要考量点。
2024-04-10 11:33:48
1119
原创 Android之安全权限
情况二：PermissionA的保护级别是signature或者signatureOrSystem App B先安装，App A后安装，**如果App A和App B是相同的签名，那么App B可以获取到PermissionA的权限。即，对于相同签名的app来说，不论安装先后，只要是声明了权限，请求该权限的app就会获得该权限。Android标准的权限有着事先定义好的、固定不变的。附加细粒度的安全功能是通过一个“许可”的机制，限定特定的进程能够执行指定的操作以及给予对每一个资源点对点的访问的URI许可。
2024-03-13 11:50:07
561
2
原创 计算机编程
的出现当做是软件开发史上的一个具有划时代意义的事件。其实，以我们的目光来看，VB10的功能实在是太弱了。甚至对最简单的任务也需要指令，例如如何取得击键，怎样在屏幕上放一个字母，怎样在磁盘中保存讯息。幸运的是，许多这样的指令包含在处理器芯片中或内置于操作系统中，因此用户不必担心它们。，它告诉计算机如何执行特殊的任务。读者也许对许多种指令熟悉，如按菜谱烹调特殊的食物或按指定的方向到达不熟悉的目的地。而且，VB还引入了“控件：的概念，使得大量已经编好的VB程序可以被我们直接拿来使用，如今，VB已经有了6.0版。
2024-03-06 11:38:39
1512
原创 睡眠不足引发全身炎症风暴
研究者猜测，小鼠可能遭受了严重的细胞因子风暴。北京大学首钢医院神经内科主任医师高伟提醒，睡眠少带来困顿和疲乏是次要的，最主要的危害是会使人长期处于应激状态，导致机体免疫力下降，增加代谢性疾病、癌症、精神疾病等的发病风险。此前，德国图宾根大学一项真人试验研究也发现，该睡觉的时候不睡，会破坏人体内肾上腺素等的昼夜节律，导致其水平异常升高，抑制T细胞对靶标的粘附能力，T细胞和抗原结合受到影响，影响正常免疫功能。另有研究显示，与每晚睡7~9小时的人相比，睡眠不足7小时的人，心血管疾病风险会增加14%。
2024-03-06 11:34:24
103
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人