python
Chen__Wu
这个作者很懒,什么都没留下…
展开
-
dask使用kerberos认证读取hive数据库
dask使用kerberos认证读取hive数据库1、首先主机需要有KERBEROS客户端,测试kinit命令是否存在;2、执行kinit -kt xxx.keytab xxx/zzzz@EXAMPLE.COM 在此之前需要确认xxx.keytab 文件正确,以及/etc/krb5.conf配置文件配置正确下面是krb5.conf, 以下的配置和代码中的Example需要替换为自己的目标配置kerberos.example.com 这个配置是hive所在主机的映射名,可在/etc/host原创 2022-03-02 18:04:21 · 2494 阅读 · 0 评论 -
xgboost基本思想、节点分裂与公式详解
一、简单理解xgboost基本思路xgboost融合了集成的思想,是n棵树模型的融合。比如下图,首先生成tree1模型,再生成tree2模型,然后再把这两个简单的模型最终得分累加起来,作为对应的数据的预测得分。如下图的判断一个人是否爱玩游戏,男孩在tree1这边的树模型,从叶子结点可知得分是2,在tree2模型可知得分是0.9.则男孩的累积得分是2.9。(实际模型中还可根据情况进行加权累积)。老爷爷这个角色也同理,在tree1得分为-1,在tree2得分为0.9,累积得分0.1。而tree1生成1和t原创 2020-05-24 20:59:24 · 3949 阅读 · 0 评论