- 博客(16)
- 问答 (1)
- 收藏
- 关注
RSS订阅
原创 pip报错ReadTimeoutError的解决方法
ReadTimeoutError原因是pip默认源是国外网站，访问慢，可以有两种解决方案方案一：设置pip的国内源如果Administrator用户，在C:\Users\Administrator\下新建pip文件夹，在创建pip.ini文件，文件内容为： [global] index-url = https...
2019-10-25 19:15:57
6364
2
转载 中国银行卡BIN码
2018年中国银行卡BIN码大全http://www.cardcn.com/gerenwangyin/310.html序号账户开头银行卡1103农业银行-金穗借记卡-借记卡218572昆明农联社-金碧卡-借记卡3255136建行卡4255646建行卡5303光大银行-阳光卡-借记卡6356390中信银行信用卡中心（63020000）-中信JCB美元卡-贷记卡7356391中信银行信用卡中心（63020000）-中信
2020-06-12 09:41:23
20651
1
转载 [转] hue中生成oozie任务传参
转载自https://blog.csdn.net/lmb09122508/article/details/85130053 在hue中，oozie任务分为4层：1.action（可以是h...
2020-04-24 17:15:41
1145
原创 Linux终端出现"(base)"
1 背景 由于最近需要在Linux中使用Python3，同时为了方便管理，故安装了anaconda3。2 现象 为了快速安装，故安装过程中一直无脑enter，于是在安装完成后，发现在Linux终端用户名多了一个“(base)”字样，如下：看起来着实不适…得找个方法去掉才行…3 解决1) 单次更...
2020-03-05 23:31:59
30892
8
原创 统一hue与oozie时区
1 背景在使用Hue创建调度任务的过程中，我们会发现Hue的时区与Oozie的调度时间不一致。默认Oozie使用的时区为UTC，在创建调度作业时还需要考虑在当前的时间减去8个小时才能达到我们的预期。2 现象描述使用Hue创建一个调度步骤如下：step1：创建调度step2：设置时间以及时区step3：保存step4：提交此时，可以发现创建调度时设置的时间与实际调度时间不...
2020-02-28 10:59:08
562
转载 大数据常见端口
转载自：https://blog.csdn.net/u010476994/article/details/78681079常见端口汇总：Hadoop： 50070：HDFS WEB UI端口 8020 ： 高可用的HDFS RPC端口 9000 ： 非高可用的HDFS...
2019-11-07 14:42:41
286
原创 hive3删除分区时显示未找到该分区
Hive3删除分区时显示未找到该分区问题描述：在执行"alter table student_tmp drop partition(p_date_sttc=20191001);"命令时报错！！1.错误描述Error: Error while compiling statement: FAILED: SemanticException [Error 10006]: Partition no...
2019-11-04 19:50:48
2308
1
原创 基础篇：json模块
目录1.基本转换1.1 dumps()1.2 loads()2.与流或文件交互2.1 dump()2.2 load()JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式。它是基于ECMAScript的一个子集。 JSON采用完全独立于语言的文本格式，但是也使用了类似于C语言家族的习惯(包括C、C++、Java、JavaScript、Perl、Pytho...
2019-10-23 20:15:56
622
原创 sys.stdout.flush的作用
前言sys.stdout.write() 和 print()官方源码"""sys.stdout.write(string) Write string to stream. Returns the number of characters written (which is always equal to the length of the string).print(value...
2019-10-16 18:56:58
23941
8
原创 hive参数传递hivevar、hiveconf
hiveconf 和 hivevar1、传递单个参数1）hiveconfhiveconf用于定义hive执行时的属性，即配置参数可覆盖hive-site.xml (hive-default.xml)中的参数值，如用户执行目录、日志打印级别、执行队列等常用的配置属性如下：参数名称参数含义hive.metastore.warehouse.dir启动时指定用户目...
2019-10-15 20:25:48
9002
原创 HiveQL窗口函数
HiveQL窗口函数一、窗口函数语法二、窗口函数类型数据准备１、聚合函数1) sum()2) avg()3) count()4) max()5) min()２、序列函数1) ntile(n)３、排序函数1) row_number()2) rank()3) dense_rank()4) cume_dist()5) percent_rank()４、窗口函数1) lead(col,n,DEFAULT)2...
2019-09-05 10:42:40
2444
原创 关于Python的画板、画布与绘图区的相关知识
概况画板、画布和绘图区之间是一个层次关系。画板位于最底层，用于放置画布它只是辅助工具，并不需要我们实际操作；画布位于画板之上，是我们绘图的基础；绘图区是画布上用于绘图的区域，一块画布上可以开辟出多个独立的绘图区。Matplotlib下画板称为Canvas画布称为Figure绘图区称为Axes由于一个程序窗口只能包含一个画布，所以创建一个画布就是创建一个窗口。与MATLA...
2018-12-02 20:27:54
6504
原创 Python（或R）迭代创建对象
前言在进行数据分析或者其他工作时，有时需要批量创建多个对象，下面提供在Python和R下实现上述目的的方法。假设你想创建五个对象，对象名分别为a0,a1,a2,a3,a4。Python实现：通过内置函数locals()locals()函数以字典的形式返回局部变量。具体如下：for i in range(5): locals()['a' + str(i)] = i...
2018-11-14 17:11:29
567
原创 Python绘制雷达图（俗称六芒星）
背景《Python数据分析与挖掘实战》 案例2–航空公司客户价值分析在该案例中的雷达图缺少相应的代码，查看相关文档之后，实现的代码如下。数据用于作图的数据对象名为data_cluster，数据展示如下：绘制代码import numpy as npfrom matplotlib.pyplot import pltdef plot_radar(data): ''' ...
2018-11-09 23:40:10
19459
10
原创 Win10下为Python安装Graphviz模块
Win10下为Python安装Graphviz模块步骤：下载并安装Graphviz设置环境变量为Python加载Graphviz下载并安装Graphviz可以去Graphviz的官网下载：https://graphviz.gitlab.io/_pages/Download/Download_windows.html页面如下，可直接下载.msi文件自动安装（根据需要自己选择安装...
2018-11-03 15:54:02
6946
5
空空如也
hive查询某个表时报错，查询其他表正常
2019-11-14
TA创建的收藏夹 TA关注的收藏夹
TA关注的人