自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

MISAYAONE的博客

坚持、果敢、勤思、沉淀

  • 博客(13)
  • 资源 (4)
  • 问答 (2)
  • 收藏
  • 关注

原创 NOSQL 和SQL区别及使用场景

NoSQL 数据库的使用场景 - jlins - 博客园 (cnblogs.com)NoSQL的分类及其优缺点和应用场景 - 简书 (jianshu.com)

2021-05-31 09:51:48 404

原创 Hive Sql/ Spark Sql 数据倾斜优化方案

(260条消息) spark sql 数据倾斜案例实操_苏苏爱自由-CSDN博客_spark sql 数据倾斜3、Hive-sql优化,数据倾斜处理 - abc十号 - 博客园 (cnblogs.com)

2021-05-28 09:09:17 276

原创 TODO

1:spark sql 实现数据倾斜优化2:在线存储与离线存储3:NOSQL与SQL4:MYSQL 中 sql 的执行顺序

2021-05-26 09:46:29 79

原创 Hive 的索引

(267条消息) 大数据开发之Hive篇13-Hive的索引_只是甲的博客-CSDN博客_hive 索引Hive 索引设计出来就是为了避免全表扫描,但是实际上索引表创建出来可能比原表还大,性能还不如扫全表。(267条消息) Hive之索引_凤无痕的博客-CSDN博客_hive 索引bitmap索引(267条消息) Hadoop组件之-HIVE(位图索引)_reb12345reb的博客-CSDN博客...

2021-05-25 09:11:54 201

原创 python 2.7编码问题

https://sanyuesha.com/2016/11/06/python-string-unicode/

2021-05-24 15:09:46 74

原创 Python2.7的编码问题

https://sanyuesha.com/2016/11/06/python-string-unicode/

2021-05-24 15:08:18 282

原创 SparkSession与SparkContext 关系

【Spark】SparkSession与SparkContext(详解)

2021-05-24 09:43:57 605

原创 Spark 初始化机制(SparkContext干了什么?Scheduler 干了什么?)

Spark Scheduler 内部原理剖析 - 云+社区 - 腾讯云 (tencent.com)TaskSchedulerDagSchedulerSchedulerBackendTaskSetManagerExecutorAllocationManager任务调度策略+失败重试机制+黑名单机制+动态资源分配机制+预测执行机制(266条消息) 一文搞定Spark的调度器的通信终端(SchedulerBackend)_LMR的博客-CSDN博客以后可能会看...

2021-05-24 09:08:34 172

原创 视图与物化视图

物化视图是一个通用的概念,在OLAP、OLTP中都存在物化视图在HIVE中的表现:Apache Hive 3.0之物化视图 Part1 - 云+社区 - 腾讯云 (tencent.com)什么时候更新,怎么更新?Hive 3 物化视图学习总结 - 灰信网(软件开发博客聚合) (freesion.com)视图在HIVE中的表现:Hadoop Hive概念学习系列之hive里的视图(十二) - 大数据和AI躺过的坑 - 博客园 (cnblogs.com)...

2021-05-17 09:33:04 647

原创 杂七杂八的博客

Java Tools (apache.org) ORC存储到底长啥样?

2021-05-15 17:31:22 123

原创 索引的好处总结

总结:(251条消息) 索引的优点和缺点_q1035331653的博客-CSDN博客_索引的优缺点本质上就是为了加快mysql各种操作的速度,比如join的速度,排序的速度,分组的速度,查找的速度(主键索引额外的功劳还有保证数据的唯一性)细节:(251条消息) 索引优点(3):加快表连接的速度(对hash关联算法的影响)_SQL Server探索-CSDN博客_为什么索引加速表连接(251条消息) 索引优点(4):降低分组、排序时间_SQL Server探索-CSDN博客_sql优化减少排序时间

2021-05-11 09:08:51 312

原创 Mysql 索引失效问题探究

失效情况总结:索引失效的7种情况 - liehen2046 - 博客园 (cnblogs.com)1:or 条件什么情况下导致索引失效,什么情况下索引不会失效,为什么会失效?(251条消息) 为什么where条件中使用or索引不起作用?_azhegps的博客-CSDN博客or会导致MySQL索引失效的原因 - it610.com一次的全表扫描要快于(全表扫描+索引+merge)(根本上是成本优化的探究),如果表特别小呢?2:复合索引为什么不用最左字段索引失效?MySQL索引失效原

2021-05-08 09:31:37 171

原创 hive中估算map和reduce task个数的方法和参数设置相关

(250条消息) hive计算map数和reduce数_一只刚刚上路的猿-CSDN博客hive优化之——控制hive任务中的map数和reduce数 – lxw的大数据田地 (lxw1234.com)(偏向于控制map和reduce的个数,比较老的文章,但是还是有参考价值)...

2021-05-07 09:45:00 359

新版glut32.dll

新版本glut32.dll 可解决“无法定位程序输入点 _glutCreateWindowWithExit于动态链接库glut32.dll上”问题

2017-06-13

仿宋GB2312字体

GB2312编码适用于汉字处理、汉字通信等系统之间的信息交换,通行于中国大陆;新加坡等地也采用此编码。中国大陆几乎所有的中文系统和国际化的软件都支持GB 2312。

2017-05-22

2017 华为软件精英挑战赛赛题

2017 华为软件精英挑战赛赛题:大视频时代•布局 在给定结构的G省电信网络中,为了视频内容快速低成本的传送到每个住户小区,需要在这个给定网络结构中选择一些网络节点附近放置视频内容存储服务器。需要解决的问题是:在满足所有的住户小区视频播放需求的基本前提下,如何选择视频内容存储服务器放置位置,使得成本最小。

2017-04-03

Faststone6.9安装包

Faststone 是一款Windows 上的一款强大的截图软件。 可以随时捕获窗口,抓取控件,抓取全屏,自定义区域截屏。 同时它还支持滚动截屏,尤其是当你截取网页的时候。 同时它还自带强大的图片编辑器,还可以屏幕取色。 它还可以录制视频,保存为视频文件或者gif 文件。

2017-01-07

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除