- 博客(6)
- 问答 (7)
- 收藏
- 关注
RSS订阅原创 Anaconda配置清华镜像源
控制台接执行 conda config --set show_channel_urls yes 生成.condarc文件 这个文件在用户目录下，然后用文本编辑器打开，用下面的内容替换之 channels: - defaults show_channel_urls: true default_channels: - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main - https://mirrors.tuna.tsinghua
2021-11-06 10:03:32
798
原创 tail 命令 tail -f 和 tail -F 的区别
ail 命令可用于查看文件的内容 tail notes.log # 默认显示最后 10 行 tail -n 100 notes.log #显示最后100行数据 tail -n +100 notes.log #显示从第100行开始，直到最后行的数据 tail -f 等同于--follow=descriptor，根据文件描述符进行追踪，当文件改名或被删除，追踪停止 tail -f notes.log 按下（Ctrl+C）组合键停止追踪 ..
2021-10-31 16:40:28
3974
原创 Hive 调优
HIve调优 1、Fetch抓取机制 我们在刚开始学习hive的时候,都知道hive可以降低程序员的学习成本和开发成本,具体表现就在于可以将SQL语句转换成MapReduce程序运行。但是Hive中对某些情况的查询可以不必使用MapReduce计算。例如：SELECT * FROM employees,在这种情况下，Hive可以简单地读取employee对应的存储目录下的文件，然后输出查询结果到控制台。 在hive-default.xml文件中hive.fetch.task.conversion默认是
2021-10-22 17:54:45
455
原创 Hive和Mysql区别对比
Hive和Mysql区别对比 角度 Hive Mysql 外表、形式模型、语法角度 两者类似 两者类似 存储数据角度 Hive的存储依赖HDFS mysql 存储地数据放在本地文件系统 数据更新角度 Hive 不支持数据的更新，只能读，不能写 Mysql 支持文件的更新 索引的角度 Hive 在3.0版本之后，删除了索引的功能 Mysql 支持索引，适合在线在线查询数据 执行的角度 Hive底层依赖的是MR，并行计算，延迟高 Mysql底层就是它本身的执行引擎，延迟低 扩
2021-10-16 20:59:21
859
原创 Python练习,求 1000 以内的所有回文素数
# 任意的整数，当从左向右读与从右向左读是相同的，且为素数时，称为回文素数。求 1000 以内的所有回文素数。 # 素数一般指质数。质数是指在大于1的自然数中，除了1和它本身以外不再有其他因数的自然数 def fun(): alist = [] for i in range(1,1000): # range 前闭后开 for j in range (2,i): if i % j == 0: # 如果这个数除了1和本身还有其他的因数,则为质数.
2021-08-18 15:29:31
4275
原创 python练习, 打鱼晒网问题
如果一个渔夫从 2011 年 1 月 1 日开始每三天打一次渔，两天晒一次网，编程实现当输入 2011 1 月 1 日以后的任意一天，输出该渔夫是在打渔还是在晒网。 import time # 判断是否闰年 def leap(b): if ((b % 4 == 0) and (b % 100 != 0) or (b % 400 == 0)): return 1 else: return 0 # 计算从2011-1-1 到查询的日期,之间的天数 def .
2021-08-18 10:26:16
430
空空如也
优化存储过程参数使用
2023-06-17
Spark Structured Streaming 时间窗口 不能输出数据
2022-03-31
flume采集目录下的文件报错
2022-03-29
sql问题，不知道如何解决
2022-03-27
idea 如何避免 Command line is too long
2021-12-25
SLF4J报错，可能自己maven仓库的原因？
2021-12-23
python或者java 多线程输出1-100
2021-11-25
TA创建的收藏夹 TA关注的收藏夹
TA关注的人