weixin_42390253的博客

OLAP OLTP

自定义UDF函数时，出错。spark.udf.register("addName",(x:java.lang.String)=>"Name:"+x)此时的string时蓝色的，表示是别名。通过查看源码：type String = java.lang.String修改为：spark.udf.register("addName",(x:java.lang.String)=>"Name:"+x)总结：不知道此时的类别别名为什么会 错误？可能是我的scala版本不

之前虚拟机开发环境一直OK,突然一天使用，发现xshell连接不上，网络ping不通。网络正常网卡正常NAT配置正常最好检测windows服务，VM-DHCP和NAT关闭了。。。。。。。。近期windows更新，可能导致服务关闭。启动服务...

启动hive的过程中。注：次时也不能启动hive服务，因为Hadoop的版本是2.6.0，hive的版本是1.2.2，HIVE_HOME/lib目录下的jline-2.12.jar比HADOOP_HOME/share/hadoop/yarn/lib下的jline-0.9.94.jar版本高，版本不一致导致。所以将HIVE_HOME/lib目录下的jline-2.12.jar复制到HADOOP_HOME/share/hadoop/yarn/lib下，并将jline-0.9.94.jar删除，然后重启had

问题ifconfig ens33ens33: flags=4163<UP,BROADCAST,RUNNING,MULTICAST> mtu 1500 inet 192.168.216.133 netmask 255.255.255.0 broadcast 192.168.216.255 inet6 fe80::250:56ff:fe39:8b4 prefixlen 64 scopeid 0x20<link> eth..

错误异常java.lang.Exception: java.lang.ClassCastException: org.apache.hadoop.io.BytesWritable cannot be cast to org.apache.hadoop.io.ByteWritablejava.lang.Exception: java.lang.ClassCastException: org.apache.hadoop.io.BytesWritable cannot be cast to org.apach

链接：https://jingyan.baidu.com/article/3065b3b6efb2d7becff8a4c1.html

豆瓣http://pypi.douban.com/simple/清华：https://pypi.tuna.tsinghua.edu.cn/simple临时使用：pip install -i https://pypi.tuna.tsinghua.edu.cn/simple gevent永久修改：linux系统--修改 ~/.pip/pip.conf (没有就创建一个)[gl...

import requestsfrom operator import itemgetter#执行API调用并存储url="https://hacker-news.firebaseio.com/v0/topstories.json"headers={'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (...

链接：https://blog.csdn.net/weixin_43868107/article/details/102594201

链接：https://blog.csdn.net/qq_42233538/article/details/90349753

问题：Github当前托管了多少个python项目，还有有关最受欢迎的Python仓库信息。import requestsimport pygalfrom pygal.style import LightColorizedStyle as LCS,LightenStyle as LS#执行API调用并存储url="https://api.github.com/search/reposit...

#官网文档http://www.pygal.org/en/stable/documentation/index.html查看python官方文档python -m pydoc -p 8899

大多数API都存在速率限制。即你在特定的时间内可执行的请求数存在限制。URL:https://api.github.com/rate_limithttps://api.github.com/rate_limit{ "resources": { "core": { "limit": 60, "remaining": 60, "reset": ...

response.text 解码过的数据。类型：str解码类型：根据HTTP头部响应的编码做出有根据的推测，推测的文本编码。改变编码的方式：response.encoding=”gbk”用途：response.text返回的是Unicode型数据；一般用来获取文本response.text；response.content类型：bytes解码类型：没有指定修改编码的方式：r...

数据：computer,huangxiaoming,85,86,41,75,93,42,85computer,xuzheng,54,52,86,91,42computer,huangbo,85,42,96,38english,zhaobenshan,54,52,86,91,42,85,75english,liuyifei,85,41,75,21,85,96,14algorithm,li...

数据：computer,huangxiaoming,85,86,41,75,93,42,85computer,xuzheng,54,52,86,91,42computer,huangbo,85,42,96,38english,zhaobenshan,54,52,86,91,42,85,75english,liuyifei,85,41,75,21,85,96,14algorithm,li...

数据集：1 6 5 8874319731 10 3 8756931181 12 5 8785429601 14 5 8749657061 17 3 8750731981 20 4 8874318831 23 4 8750728951 24 3 875071713用户 电影 评分 时间戳第一个package org.apache.hadoop.example;import j...

问题：java.lang.Exception:java.lang.RuntimeException:java.lang.NoSuchMethodException: org.apache.hadoop.example.MapReduce1$Mapper1.()产生于：执行MapReduce任务解决方案：Map和Reduce类须设置为Static权限修饰！...