- 博客(27)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 HIve项目入门 环境部署遇到的问题及解决方案
网上有很多种解决办法，有些是跟yarn.site文件有关系，防火墙之类的，这里我自己是可能是安装的jdk版本不适合，我安装了一个适合的版本后解决了。（二）hive --service metastore格式化有问题，显示报错，且后续的步骤无法推进。这里就可以输入hive sql了，我用的是cmd打开，sql语句结尾需要加上；解决方案：先启动dfs，参考（二），且dfs启动后保持窗口开启，关闭后则会失败，启动成功后如下。（三）启动成功后，运行hive.cmd多次无法启动hive，
2024-01-16 03:34:19
563
原创 【统计学】Top-down自上而下的角度模型召回率recall，精确率precision，特异性specificity，模型评价
最近在学 logistic regression model，又遇见了几个之前的老面孔。召回率recall, 精确率precision，特异性spcificity，准确率accuracy，True positive rate，false positive rate等等名词在学习之初遇到的困难在于，理解各自的意思，对于评估模型的意义，以及将相关名词联系在一起。也是初学者，谨希望给大家学习时提供一些思路。
2023-10-03 12:23:37
344
原创 【统计学】stata 梳理输出命令逻辑关系 asdoc outreg2 logout esttab区别 优劣势
一、概述初学stata的时候对于stata输出的逻辑颇为疑惑， asdoc、outreg2、logout 和 esttab 这些常见的命令在跳出来的时候往往分不清楚，也不知道为什么代码里要这么用。本期文章就是梳理常见的一些输出命令，在平时学习尤其是计量经济学这样的学科时能够降低理解难度。本文主要梳理的命令包括但不限于 asdoc、outreg2、logout 和 esttab ，主要介绍其用法。以上命令都可以通过 ssc install 命令名称, replace 安装更新...
2021-11-29 03:07:09
14286
原创 【统计学】一篇文章读懂stata相关性系数矩阵输出 加星号 （*）显著水平 学术论文
学术论文里面常用到的相关分析结果通常需要针对不同显著性水平进行标记，例如下图有如下数据需要得到下图（其中*** p<0.01, ** p<0.05, * p<0.1）一、函数的准备连玉君老师的提供的分支下载（仅仅需要注册即可下载）pwcorr_a函数在计算相关系数并检验显著性的基础上还分别对 1%，5%，10% 的显著水平列印*** ，** 和 *，便于输出到论文中。将下载文件中ado文件和hlp文件复制到…\stata15\ado\plus\p或…Stata\ado\
2021-09-07 17:16:45
52977
2
原创 百度网盘 倍速播放 插件 视频倍速播放（GreasyFork TemperMonkey油猴）
GreasyFork网站提供部分可以倍速播放的插件
2021-08-24 12:01:51
25785
1
原创 【统计学】Stata 中介效应 调节效应 哑变量/多分类变量/ 连续变量 实现方法
Excel 文件转成stata文件工具： Stata Transfer
2021-08-15 15:49:53
9343
原创 【Tableau作图思路-可视化】扇形图 - 层叠饼图 镶嵌饼图、圆环 经验分享
一、环形图用Tableau做图可以把多个要表现的图形放在同一个面板中，做饼图的话不如wps方便，但是因为Tableau拥有足够的图片配色方案，因此在高科技风、金融、科研风方面的图片制作是个不错的选择。环形图方法指路二、镶嵌饼图层叠饼图/镶嵌饼图指的是一个环表示大分类的占比，一个环具体展示小分类的占比。在上面这个实例的图片中，大环表示各个国家总投资额占总体的比例，内环表示这些国家都归属于哪些类型，同时展现这些类型各自的占比。下面还有一个示例，两个饼图外圈为各个消费品大类销售额的占比情况，内圈为子类
2021-06-25 14:28:29
2205
原创 【运筹学】运输问题建模 （某厂考虑安排某件产品在今后 4 个月的生产计划已知各月工厂的情况）
某厂考虑安排某件产品在今后 4 个月的生产计划，已知各月工厂的情况如下表所示
2020-11-11 11:31:12
5302
2
原创 【统计学】利用spss正态分布假定检验 S-W检验 K-S检验 直方图 Q-Q图
（1）直方图：将数据以图的形式呈现，观察是否符合一定规律（形似正态分布图像）。这个方法比较抽象，难以描述。（2）S-W检验和K-S检验：小样本(小于50)时建议使用S-W检验，大样本(大于50)时建议使用K-S检验。使用软件进行统计学问题解决时会使用，基本上不要求手算。S-W检验小样本时可以进行手算。（3）Q-Q图和P-P图：P-P图是根据变量的累积比例与指定分布的累积比例之间的关系所绘制的图形。通过P-P图可以检验数据是否符合指定的分布。当数据符合指定分布时，P-P图中各点近似呈一条直线。而 Q-Q图
2020-10-10 12:58:27
28105
1
原创 【统计学】分类数据分析 相关分析 方差分析 比较 研究思路 spss
分类数据分析是针对类别型变量之间是否有影响进行的分析。而相关分析是类别型变量之间有影响的前提下，研究变量间相关的程度，以及正相关还是负相关。方差分析稍有不同，是研究分类型变量对数值型变量的影响（而不是类别型变量之间的关系）。上统计学课的时候这几个部分都是我比较喜欢的，柳老师讲的非常有趣。一、三种分析的分析思路...
2020-10-08 22:54:24
3998
原创 【统计学】假设检验 z检验t检验 Python实现
一、快速理解我开始学习假设检验时遇到了几个问题：什么是假设检验？为什么要假设检验？什么是假设：对总体参数（均值，比例等）的具体数值所作的陈述。（因为一般来说总体的属性具体值我们是测不出来的，也只是靠不停的测试逼近具体值，所以只能假设总体的某一个属性的具体值为xxx）而假设检验就是先对总体的参数提出某种假设，然后利用样本的信息判断假设是否成立的过程。样本值是变化的，通过样本值计算出来的样本参数不一定每次都一样，我们不知道测出来的参数与总体参数是样本的随机性还是一些其他的原因导致的（例如测量过程出
2020-10-01 13:37:13
2525
原创 【统计学】Student 双边t检验 Python实现假设检验题目
糖厂用自动打包机打包，每包标准重量是100千克。每天开工后需要检验一次打包机工作是否正常。某日开工后测得9包重量(单位：千克)如下： 99.3 98.7 100.5 101.2 98.3 99.7 99．5 102.1 100.5 已知包重服从正态分布，试检验该日打包机工作是否正常(a＝0．05)?用这题演示python实现双边检验的几种方法import numpy as npfrom math import *array = [99.3,98.7,100.5,101.
2020-10-01 00:45:40
2707
原创 【Python】词频统计(written in python and Mapreduce)
一、利用Python进行词频统计（一）计算机等级考试中常用的方法（二）升级方法利用Python进行词频统计的核心语法利用Python进行词频统计的三种方法示例二、Mapreduce的方法进行词频统计面对大型的文件的统计需求，需要使用到集群来进行词频统计。我们打算在Hadoop平台上运行Python程序，分布计算从而提高我们词频统计的效率。因此使用了写MapReduce的方法。（一）代码示例以及解释Map:#!/usr/bin/env python# -*- coding: utf-8
2020-09-25 10:34:04
4663
原创 【计算机二级】一篇文章搞懂范式，1NF,2NF,3NF,BCNF
定义学生、教师和课程的关系模式STC(SNO，SN，SA，TN，CN，G)，其中的六个属性分别为学生的学号、姓名、年龄、教师的姓名、课程名以及学生的成绩，则该关系为（）。A.第一范式 B.第二范式 C.第三范式 D. BCNF范式1. 首先确认主键（1）什么是主键：表中的一个或多个字段（主键可以包含多个字段），用于唯一的标识表中的某一条记录，是用户选择的候选键。一个数据列只能有一个主键，且主键的取值不能缺失，即不能为空值（Null）。（2）超键和候选键：超键泛指所有可以用于唯一的标识表中的某一条.
2020-09-22 00:45:27
2992
原创 【Python】Pandas DataFrame整理、运算操作
一、DataFrame的建构整理转置行和列的增加减少变动（1）列的增加可以有2种情况：使用索引列的方法；使用concat函数合并（2）行的增加有3种情况：使用concat函数合并，使用append函数增加（3）drop函数和del函数删除concat函数参数介绍，函数简介pandas 数据合并方法汇总concat合并两个dataframe 合并的多个示例重置索引reindex比较少用：替换二、DataFrame的运算与函数简单运算中+、-、*是简单运算符可以直接使用，而除法需
2020-08-24 13:13:08
847
原创 【Python】一篇文章学习Pandas包 Pandas Series、DataFrame 对比学习
一、Series与python字典对比Series兼并了数组和字典的功能，既可以看作是一种特殊的字典，又可以看成是通用的Numpy数组。既可以支持数组的切片操作等，还可以运用字典获取values的方法，举例：dic={1:'beijing',2:'xiaan',3:'tianjing',4:'japan','five':'American'}nums=[1,2,3,4,'five']series=pd.Series(dic,index=nums)#字典的取值方法print('dic:',dic[
2020-08-24 02:24:21
389
原创 【Python】数组 规整输出 格式化输出 输出无括号
一般输出都自带括号，元素类型为str时还带了“”引号先提供两种方法dic={1:'beijing',2:'xiaan',3:'tianjing',4:'japan'}nums=[1,2,3]series=pd.Series(dic,index=nums)#方法一 使用Join函数print("values:"," ".join(series.values))#方法二 使用for loopfor i in series.values: print(i,end=' ')values:
2020-08-21 16:32:37
1939
原创 【Python】Time模块 ValueError: unconverted data remains: UnicodeEncodeError:
Python中与时间和日期相关的常见模块主要有calendar,time和datetime，后两个主要用于时间的计算和处理等，而calendar一般则用于日历获取、显示等方面。import timeimport datetime一、time模块获取当地时间（localtime(),ctime(),time())import timeimport datetimea= time.localtime()b=time.asctime()#time.asctime([tuple])将时间元组转
2020-08-20 00:41:17
16188
原创 【Python】Numpy包 ndarray方法 经验分享
感觉学习的主要是函数的用法，一些简单功能的实现，以及一些函数的使用逻辑ndarray基础操作和使用（创建、索引、切片、变形等）ndarray的通用函数、聚合和计算
2020-08-17 23:42:57
425
原创 【R language】 清楚区分输出函数 cat、print、paste 区别 经验分享
一、 简介cat、print函数都是输出函数> cat("hello world")hello world>> print("hello world")[1] "hello world"print的输出有点像列表输出的未命名元素> alist=list(c(1,2,3,4,5),c('a','b','c','d','e'))> alist[[1]][1] 1 2 3 4 5[[2]][1] "a" "b" "c" "d" "e"二、 print与c
2020-07-18 20:44:45
12998
原创 【统计学】原假设 备择假设 对立假设 p值与检验统计量
单侧检验与双侧检验的判断与建立原假设原假设与备择假设的建立如何建立假设并没有固定的统一标准，假设的确定取决于要检验的问题以及检验的目的。一般来说，在考试中一般都将希望证明的命题放在备择假设，而把原有的、传统的观点或结论放在原假设上。可以这么理解，如果原有的传统的观点不容置疑，也就不需要检验了；原假设的位置...
2020-07-07 20:06:44
7783
1
原创 【概率论与统计学】最常用常考的6种概率计算 经验分享
本文介绍在概率论与数理统计，统计学这两门课中，以及平时的作业中最常用的两种需要加以应用的六种概率。按照数据的类型可以分为两类，一类是针对连续型变量（均匀分布、指数分布、正态分布），另一类则针对离散型变量（0-1分布、二项分布、泊松分布）。一、离散型变量1、二项分布在每次试验中只有两种可能的结果，而且两种结果发生与否互相独立互斥，每次的实验结果都互不影响无关，事件发生与否的概率在每一次独立试验中都保持不变。期望E（X） = np 方差D（X） = np（1-p）；2、0-1分布已知随机变量
2020-06-16 18:44:46
3742
1
原创 【R language】R语言主成分PCA题目 思路分享
12.3对下表的50名学生成绩进行主成分分析，可以选择几个综合变量来表示这些学生的6门课程成绩？数据如下：1. 数据导入与数据标准化> data=read.csv('D:/R languaga_main factors_analysis.csv',head=TRUE) > View(data)> std_data=scale(data[1:6]) #数据标准化> #还可以通过rownames(std_data)=data[[1]] #数组各行名字定义为数据文件的的第
2020-06-13 13:39:38
1111
原创 【Python】Python 基本函数与操作-适合Python入门
eval(“str”)去除字符串最外侧的引号，并执行去掉引号后的字符的内容。str="python"a= eval("str")print(a)#结果输出'python'b=eval("'python'")print(b)#结果同上为'python'c=eval("python")print(c)#出错，会显示 python not defined，即把你的python当成自变量，而这个自变量是未定义的。python=123d=eval("python")print(d)#可
2020-05-24 20:59:48
517
原创 【Python】Scipy下载 Statsmodels下载 经验分享
Background:今天才知道还需要下载Statsmodels，了解到还应该先准备一下其他的工具Problems:Anaconda和Jupyter不太了解，下载之后实际上还是无法直接在IDLE中使用相关的包；Statsmodels的安装前还需要安装其他的包使用Pip安装Statsmodels报错太多没有看懂（主要是read time out的问题）也没有找到较合适 符合问题的教程（修改...
2020-02-02 00:33:58
2323
原创 【Python】Matplotlib 下载 pandas下载 numpy下载 经验分享 路径 方法
Succeed in downloading Matplotlib、Pandas、NumpyBackground :我的python我一直以为是3.7和3.5的都有，3.5是为了考试从考试资料群下载的，3.7在VS中下过，好像也在官网下载过（导致不清楚python安装的路径）Problems:cmd命令行的语句不太清楚(在控制器中打开某一路径)，也不太熟悉一些教程中 关于该在哪里输入命令...
2020-02-01 00:05:37
303
WINQSB.rar
2020-11-19
管理运筹学3.0-运筹学建模分析工具软件.rar
2020-11-07
量化投资以python为工具 课外习题训练 代码.rar
2020-08-21
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人