问题
文章平均质量分 70
一些问题
GOD_WAR
喜欢钻研大数据、python、机器学习、人工智能...
展开
-
eclipse 访问http://localhost:8080 报404解决方案
eclipse中tomcat启动成功,但http://localhost:8080无法访问【问题描述】 tomcat在eclipse里面能正常启动,而在浏览器中访问http://localhost:8080/不能访问,且报404错误。同时其他项目页面也不能访问。 关闭eclipse里面的tomcat,在tomcat安装目录下双击startup.bat手动启动tomcat服务器。访问htt://localhost:8080/能正常访问tomcat管理页面。【问题原因】...原创 2021-04-13 11:09:05 · 4770 阅读 · 2 评论 -
Error configuring application listener of class org.springframework.web.context.ContextLoaderListene
Maven+spring 报错:错误信息:SEVERE: Error configuring application listener of class org.springframework.web.context.ContextLoaderListener解决方案:1. 打开工程属性对话框,到Deployment Assembly页面,点击Add2. 选择Jave Build Path Entries3. 把程序用于的Library加入进来4. 重新运..原创 2020-07-02 00:02:19 · 172 阅读 · 0 评论 -
jsp文件报错信息 The superclass “javax.servlet.http.HttpServlet“ was not found on the Java Build Path
新建的web工程,啥也还没有动呢,就报错了。。。报错信息The superclass "javax.servlet.http.HttpServlet" was not found on the Java Build Path建立了一个Javaweb工程,Jsp文件报错,并在eclipse中配置了Web容器Tomcat。原本开心的新建jsp页面,添加一个简单的Java类。可是,JSP页面顶端出现“红色”的报错信息:The superclass "javax.servlet.http.Http.原创 2020-07-01 23:56:12 · 539 阅读 · 0 评论 -
idea remote debug
一、介绍:Java远程调试的原理是两个JVM之间通过debug协议进行通信,然后以达到远程调试的目的。两者之间可以通过socket进行通信。二、步骤:1、修改配置文件,添加jvm 启动参数 -Xrunjdwp 开启远程debug 端口。一般设置为8888 ,注意staging环境部署了多个项目,端口可能冲突。参数:"-Xrunjdwp:transport=dt_socket,server=y,suspend=n,address=8888"2、线下发布成功后,可以查看进程判断是否开启.原创 2020-06-17 19:58:19 · 5130 阅读 · 0 评论 -
Hive SQL count(distinct)效率问题及优化
本篇教程介绍了大数据统计分析 Hive SQL count(distinct)效率问题及优化,希望阅读本篇文章以后大家有所收获,帮助大家对大数据云计算大数据分析的理解更加深入。一个工作任务,统计一个按天分区每天都有百亿条数据条的hive表中account字段的非重用户数(大概两千万)。后来又更改为按id字段分别统计每个id的用户数。我很轻易的跳出来了count(distinctaccount)这个句子。然后写上了一行查询,等待了四个小时,然后map反着跑就知道没这么容易的任务。。然后想起...原创 2020-05-19 20:23:45 · 5012 阅读 · 0 评论 -
mysql 指定ip,指定用户,指定数据库权限
mysql设置指定ip远程访问连接实例本文实例讲述了mysql设置指定ip远程访问连接的方法,分享给大家供大家参考。具体实现方法如下:1. 授权用户root使用密码jb51从任意主机连接到mysql服务器:GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'jb51' WITH GRANT OPTION;flush privileges;2.授权用户root使用密码jb51从指定ip为218.12.50.60的主机连接到m原创 2020-05-11 17:06:54 · 1106 阅读 · 0 评论 -
mysql 统计某字段连续出现的次数
直接上干货,测试数据如下select distinct dd.Num ConsecutiveNumsfrom (select d.score, @n :=if(@pre=score,@n+1,@n:=1) count, @pre:=scorefrom Logs d, (select @pre:=null, @n :=1) r ) ddwh...原创 2020-04-27 11:51:52 · 2858 阅读 · 0 评论 -
数据本地性,引起task分配不均executor执行慢
如下问题讨论:哥们给出的结论是repartition导致的数据倾斜。那么接下来,我们就仔细分析一下不是数据倾斜原因。那哥们数是repartition导致的数据倾斜原因,是由于前三行数据输入和输出都是好几百兆,而后面的都是只有几个MB的输入,0B输出,所以下结论是数据倾斜。数据倾斜往往指的是同一个stage内部:有的task数据量大,有的task数据量小,task间数据量大小...原创 2020-04-25 19:52:44 · 1100 阅读 · 0 评论 -
nohup 详解
nohupnohup 命令运行由 Command参数和任何相关的 Arg参数指定的命令,忽略所有挂断(SIGHUP)信号。在注销后使用 nohup 命令运行后台中的程序。要运行后台中的 nohup 命令,添加 & ( 表示“and”的符号)到命令的尾部。nohup 是 no hang up 的缩写,就是不挂断的意思。nohup命令:如果你正在运行一个进程,而且你觉得在退出帐户时...原创 2020-04-24 14:11:07 · 243 阅读 · 0 评论 -
数据脱敏问题
一、什么是数据脱敏? 数据脱敏(Data Masking),又称数据漂白、数据去隐私化或数据变形。 百度百科对数据脱敏的定义为:指对某些敏感信息通过脱敏规则进行数据的变形,实现敏感隐私数据的可靠保护。在涉及客户安全数据或者一些商业性敏感数据的情况下,在不违反系统规则条件下,对真实数据进行改造并提供测试使用,如身份证号、手机号、卡号、客户号等个人信息都需要进行数据脱敏。 ...原创 2020-04-22 16:25:52 · 4970 阅读 · 0 评论