我也要用- 博客(193)
- 论坛 (1)
- 收藏
- 关注
RSS订阅
原创 从微观世界看世界---猜想
今天看了<<如何阅读一本书>> 作者 是1900年代的人，1940年出版了此书。然而距离此书出版已经过去80年了，作者也早已不在人世，却给后世带来这么大的影响力。今天元宵节刚加完班，弄抵抗抗疫情相关的数据。吃饭的时候和家里人畅聊，突然产生感想。自己也得留点东西，存在于世上，当然不仅仅是精子。那就 留一些文章吧。自己虽然不是什么名校硕博。但是从小就对这个世界充满好...
2020-02-08 18:37:15
249
原创 python 通过 Flask 实现 接口demo
教育的力量大于天赋的力量。The power of education is greater than the power of genius. -------伏尔泰目录准备条件windows版 无参请求 有参get请求Linux版(这里用的CentOS)后台运行准备条件1.肯定你得先有python2.然后你得有flask （没...
2020-01-07 18:38:12
635
原创 电商项目框架选择
接下来，我就要用生动形象的语言以及苍白无力的技术给大家描述一下京东官网的 制作。先来个自我介绍，我是一位在京东工作了3年的java程序员。毕业于麻省理工大学计算机系。不说出来你可能觉得我不流弊，可能不会看我的博客。接下来给大家讲讲，我是怎么写京东的。 首先要知道，我做的是什么，电商平台，电商平台会遇到的问题，访问量超级大，需要高并发，高可用的特性。为了解决这个问题，...
2019-06-16 18:56:16
966
1
原创 前端vue实现拖拽效果
先上图，让你们明白下啥意思 图1-我写了个按钮，我拖它到哪就能放到哪图2-为了节省时间我上传的分辨率比较低，点击保存后，你下次关闭网页、或者刷新网页、打开页面它会恢复到你保存的地方图3-当你没保存的时候，刷新界面，它不会保存代码<!DOCTYPE html><html lang="en"><head> <meta charset="U...
2021-02-24 10:16:39
6
原创 springBoot限制上传文件大小的方法
1.导依赖pom.xml<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd/mave
2021-02-04 10:14:35
14
原创 springBoot上传文件
1.创建springBoot项目2.导入pom依赖<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apac
2021-02-04 10:11:31
16
原创 spark Mllib 决策树模型训练与效果检测
1.导包:<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd/maven-4..
2021-02-01 17:22:49
21
原创 java.lang.NoSuchMethodException: org.apache.spark.ml.classification.DecisionTreeClassificationModel.
spark-scala Mllib加载模型和训练模型出现的问题花了我4个小时，最后在堆栈 社区找到了答案模型存储val model = classifier.fit(assembledTrainData)model.save("hdfs://192.168.48.101:8020/user/ds/models/linearRegression")模型加载DecisionTreeClassificationModel.load("hdfs://192.168.48.101:80
2021-02-01 16:47:49
11
原创 IDEA 创建SparkSession 失败出现 DEFAULT_TINY_CACHE_SIZE
我使用的是spark2.1.0缺少Netty依赖<!-- https://mvnrepository.com/artifact/io.netty/netty-all --><dependency> <groupId>io.netty</groupId> <artifactId>netty-all</artifactId> <version>4.1.11.Final</version&g...
2021-01-30 08:56:04
45
原创 sparkshell 连接hdfs通过read中的csv方法获取数据
spark和hadoop都全都配置了环境变量,开启了hadoop,并且关闭了防火墙var dataWithoutHeader=spark.read.csv("hdfs://192.168.48.101:8020/user/ds/covtype.data")hdfs://192.168.48.101:8020要与hadoop的core-site.xml保持一致hadoop中的core-site.xml成功:...
2021-01-26 14:02:41
15
原创 org.junit.runners.model.InvalidTestClassError: Invalid test class ‘ReadFile‘: 1. Method readWords(
这是由于加了单元测试单元测试的方法不能有返回值单元测试指的是:运行完就释放内存，如果有返回值无法接收值，导致报错。改写将方法改为void即可，并且去掉return
2021-01-15 12:15:46
16
1
原创 css布局-文字如何位于图片正下方，文字如何位于图片右边中间
常用就2种，文字在图片下方，文字在图片右方。如果你还在用padding,margin设置，那你太low了图片位于正下方<!DOCTYPE html><html lang="en"><head> <meta charset="UTF-8"> <meta name="viewport" content="width=device-width, initial-scale=1.0"> <...
2021-01-06 18:16:53
108
原创 javaScript打印等腰三角形，全网最详解(费曼学习法)
至于是不是全网最详细，不敢说。但是很详细。立志于打造8岁小孩都能听懂的等腰三角形。首先你需要具备以下知识,for循环,基础运算(加减乘除),javaScript的基础.,年龄大于等于8岁。请耐心看完。中途若不适，请耐心看。1.首先树立一个正确结果的目标。这里给大家手绘了一个结果。等腰三角形2.分析发现，这东西有3行，第一个行有2个空格，1个点 第二个行有1个空格，3个点 第三行有0个空格 5个点3.那对于一行来说，不就是先打印空格，在打印点嘛...
2021-01-06 11:02:09
26
原创 python flask参数请求，全网最详解
1.使用pip 安装flaskpip install flask2.代码#coding=utf-8from flask import Flaskfrom flask import requestapp = Flask(__name__)@app.route("/login", methods=["GET", "POST"])def hello_str(): if request.method == "POST": username = request.
2020-12-10 15:33:32
25
原创 爬虫爬取数据为𞃳数字乱码解决方案
如果你的数据爬取出来通过xpath(test)解析发现为[]，或者使用etree打印出来为嬙这种类似那么请往下观看否则请节约您的时间离开python代码导入html包通过html.unescape(&#乱码格式字符串)如果传入的不是字符串请转换为字符串 rtest=str(etree.tostring(r)) rtest=html.unescape(rtest) print(rtest)结果如下...
2020-12-09 10:49:45
77
原创 JS常用复杂结构
对象数组 arr[{name:'狗蛋',age:18},{name:'狗蛋爸爸',age:38}]创建方式arr=[]var people1={name:'狗蛋',age:18}varpeople2={name:'狗蛋爸爸',age:38}arr.push(people1)arr.push(people2)生成完成。
2020-12-03 18:11:46
14
原创 presto正则表达式
http://prestodb.jd.com/docs/current/functions/regexp.html相当好用，感觉自己无所不能了
2020-12-03 14:55:59
1296
原创 Flask No Access-Control-Allow-Origin 跨域问题
如果不是浏览器请求python-flask接口的同学,不用往下看了原因:一般自己写的项目，前后端都是存放在同一个域名下的。也就是部署到同一个tomcat上。那样就不存在跨域问题但是！！！ 我在桌面写了个index.html，通过ajax访问我部署的flask的接口。产生了跨域请求。我index前端的请求为80端口，但是请求后端的却是5000。造成跨域安全问题。导致无法请求。解决方案:在后端-flask中开启允许跨域请求。1.使用pip安装此模块>pip ins...
2020-12-03 14:48:17
25
原创 echarts配置官方示例的背景颜色调换
送人玫瑰，手有余香~，优秀的人从不吝啬于赞美。如果帮到你，请顺手点个赞，点赞，关注的都是帅哥！，美女！问题:echarts点击下方的框框能够调换 底色下载过来的代码。默认是白色，如何变成黑色款式。https://echarts.apache.org/next/examples/zh/editor.html?c=dataset-encode0例子:需要导入echarts(最新版,进去后另存为即可)下载地址：https://echarts.apache.org/exa...
2020-12-03 12:15:51
105
原创 python使用mysql连接数据库,并且通过方法传入数据进行插入
送人玫瑰，手有余香~，优秀的人从不吝啬于赞美。如果帮到你，请顺手点个赞，点赞，关注的都是帅哥！，美女！mysql表和字段python代码import pymysqlconn = pymysql.connect(host="localhost",user="root",password="123456",db="test",charset="utf8")cursor=conn.cursor()def inset(a,b,c): cursor.execut..
2020-12-02 14:56:37
55
原创 Python寻找字符在字符串中出现第n次的位置
def findSubStr_clark(sourceStr, str, i): count=0 rs=0 for c in sourceStr: rs=rs+1 if(c==str): count=count+1 if(count==i): return rssourceStr为字符串str为char字符i代表第几次例:每一行是一个sourceStr需...
2020-12-01 17:44:33
193
原创 idea获取Hadoop失败 java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop
如果你是因为他的错误信息为,如果不是，那你后面不用看了网上查了说没有winutils东西如果hadoop环境变量没有配置的同学，请先去配置环境变量可是我有winutils，并且我cmd使用winutils也能跑。但是配置环境变量后还是不行，那是因为环境变量配置完成后，idea不能瞬间加载环境变量，重启idea后自动加载环境变量的内容。解决方案:重启idea...
2020-11-18 23:12:21
39
原创 小妹妹问我如何在十天内熟记6篇稿子
有一个大三的川妹子，英语专业的。请教我，如何在十天内熟记6篇稿子?我何德何能啊，也没有做过，我怎么说的呢如果让我记忆，我会去打小抄（作弊的一种方式）但这不是我某人的风格，于是我利用业余时间，大概30分钟的样子，随便找了篇，300多字的文字，将它记下来了。完全没有背诵，我觉得背诵很蠢，不符合人类的记忆。我以前背文言文的时候，是死记硬背的，不仅头冷，而且没怎么理解。最后记住了，也是大脑给这段文言文强行解释，才能记住。然后就感觉，让我大脑记住东西，比如赋予一些逻辑有关的或者熟悉含义的.
2020-11-10 09:33:58
58
原创 最近在某知名培训机构当大数据讲师
博文没什么时间更新了，业余时间都是写教案和备课。教的课程，主要是些基础，涉及面非常广。从ui-前端-java-大数据-剪辑。经常出差，大家年末见。
2020-11-03 16:03:01
95
原创 IDEA无法使用maven等常用问题汇总
1.idea的安装数据是存储在c盘的用户目录下的，之前有同学的名称是ddddli!！ 导致无法识别。更换账户名称即可。(勿用:特殊字符)建议英文2.maven与idea有兼容性冲突，需要自己下载相关兼容的版本3.idea下载缓慢可以更换settings.xml，更换为国内阿里云镜像4.下载的jar包为1kb，通常是ssl证书造成的，忽略证书即可，证书会导致下载的东西为 后缀lastupdate只有1kb的jar-Dmaven.wagon.http.s...
2020-09-14 11:49:12
271
原创 连接Mysql出现java.lang.ClassNotFoundException: com.mysql.jdbc.Driver ,绝对可用
这里，我在测试如果没有mysql-connect是否能通过java.sql访问数据库所以我没有创建Maven项目，如果你是maven项目则需要在pom文件中导入(切记保持网络不间断)<dependency> <groupId>mysql</groupId> <artifactId>mysql-connector-java</artifactId> <version>5.1.47</version&
2020-08-31 10:42:23
64
原创 CDH6初始化cm数据库scm_prepare_database.sh失败
1.如果报错连接失败，那么还好，毕竟有个错误。那个很简单，弄个mysql-java的连接jar就行(去maven仓库下一个)mkdir /usr/share/javacp mysql-connector-java-5.1.47.jar /usr/share/javamv mysql-connector-java-5.1.47.jar mysql-connector-java.jar2.如果没有报错，但是发现没有建到库。那就笔记麻烦了，因为没有报错，你明着不知道原因。也可能是cdh公.
2020-08-18 14:27:15
444
原创 JDBC连接mysql resultSet 没有结果
写完也没有报错，于是我挨个打印。专门写了个简单的demo，发现还是没有结果。我一直以为是sql的问题，但是我在ide打印完，在mysql客户端上运行sql没有问题啊select * from table_mysql where game_type like '%动作%' or '%冒险%' or '%独立%'于是我在demo中测试了一条简单的sqlselect * from table_mysql这次有了resultSet原因:SQL在IDEA程序中无法识别。后面试.
2020-08-14 11:57:34
137
原创 Missing database name. Set via the ‘spark.mongodb.output.uri‘
Spark插入MongoDB出现的错误解决方案:1.确认是否在spark中配置了相关的库和表2.检测是否出现1个以上的spark(我之前检查过配置都没有问题，demo也可以跑，但是我的离线用户画像却一直插入不进去。仔细检查发现，我写了个sparkSession，也写了个sparkContext,但是我是sparkContext不是由sparkSession创建的。所以就导致一个服务有多个sparkContext。那么它只会执行一个sparkContext。)插入示例 val
2020-08-13 11:15:19
107
原创 IDEA设置所有项目指定默认Maven仓库
这里写自定义目录标题设置maven仓库设置IDEA启动界面为主界面调出主界面IDEA Maven设置设置maven仓库每次创建一个项目之前的maven仓库就换成默认的了，每次都得配置，用的好不爽，于是就设置 个永久的。设置IDEA启动界面为主界面这是主界面设置成主界面的好处就在于，他相当于全局设置，你进行了设置后，会对所有IDEA的项目进行更改。包括新创建的项目。好处就在于我在这里配置了其他内容，那所有的项目都会享受我配置的新内容的受益于更改调出主界面主界面在默认的情况下，只会第一次开
2020-08-06 17:25:57
1618
原创 python一直爬取网易商城(原生)
这是我接的一个单，一天写完。首先你要知道反爬虫是什么？打败反爬虫很简单。你要模仿用户。1.不同的ip（动态ip）2.随机爬取时间3.随机的用户请求头(访问网易的设备信息随机改变)我的代码如下。# S=s.decode('UTF8','ignore')import requestsimport sysimport socketimport jsonimport jsonpathimport timeimport pymysqlimport randombas.
2020-07-29 16:37:06
123
原创 CDH7集群搭建 错误 MainThread agent ERROR Heartbeating to localhost:7182
TypeError: argument of type 'NoneType' is not iterable它说的是python无法遍历，说明遍历hosts无法识别你的主机原因如下1.agent.init配置文件中的host指定错误 解决方式指定serverip或者主机名(server)2./etc/hostname 与 /etc/hosts中的别名不一致ip地址 域名 别名192.168.210.101 hadoop1.com cdh1...
2020-07-21 01:27:26
1055
原创 CentOS7虚拟机NAT联网---绝对能用
我拿word文档写的，我怕数据丢失，转存到csdn，也希望给同学们来些帮助。直接转存排版有点丑，请见谅。Vmware 虚拟机Centos7 nat模式联网1.0首先第一步打开vmware 还原默认设置 点击编辑=>虚拟网络编辑器=>点击还原默认设置选择是解释:这里会删除所有的虚拟网卡配置，并且重新安装虚拟网卡。如果没有虚拟网卡的同学，考虑你的vmware有问题,重新安装可用的vmware还原后,会给你分配新的子网ip 记住虚拟网卡...
2020-07-20 14:06:00
103
原创 Centos7 Nat 模式连接虚拟机
本人历经千古磨难，终于安装好了，并且帮助全班同学全部安装好了。安装虚拟机不下60次。出现了很多问题。这里附上宝贵手写教程。大多数同学的问题都是网络上的问题。内容如下。如何在vmware安装虚拟机，请参考我的另一篇博客Vmware 虚拟机Centos7 nat模式联网1.0首先第一步打开vmware1还原默认设置点击编辑=>虚拟网络编辑器=>点击还原默认设置选择是解释:这里会删除所有的虚拟网卡配置，并且重新安装虚拟网卡。如果没有虚拟网卡的同学，考虑你的..
2020-07-10 13:24:16
82
原创 本地IDEA运行sparkStreaming消费kafka出错 Connection with localhost/127.0.0.1 disconnected
可以看到报错第一句显示：Connection with localhost/127.0.0.1 disconnected但是我明明在application.yml中配置了我的Kafka Server的地址是：192.168.52.131:9092，而在实际连接kafka服务器时却使用的localhost/127.0.0.1这个地址，所以导致无法连接kafka Server。经过百度，得知，在设置Kafka的时候，需要设置advertised.listeners这个属性。该属性在con..
2020-07-01 00:00:02
431
1
原创 spark消费nc的数据 bug汇总
1.Exception in thread "main" java.lang.NoSuchMethodError: scala.collection.immutable.HashSet$.empty()Lscala/collection/immutable/HashSet;pom导入这个依赖<dependency> <groupId>com.fasterxml.jackson.core</groupId> <artifactId>.
2020-06-30 18:53:37
46
原创 SparkStreaming Restarting receiver with delay 2000 ms: Error connecting to 192.168.43.101:9999 java.
使用官方实例连接sparkStreaming出错,一直连接不上。一会儿能行,一会儿不行。1.防火墙我关闭了,service iptables stop查看service iptables status ，已经关闭了dead了还是报错2.我用的是centos7centos7，有2个防火墙。systemctl status firewalld 他运行的呢service firewalld stop 关闭了，成功他有毛病,为啥有2个防火墙...
2020-06-30 17:33:12
3836
原创 docker不要使用centos7以下的版本
centos7以下的版本linux内核低于3.10而docker只支持3.10以上的你如果想用必须修改内核,修改内核不一定成功,失败后你的机器无法启动一直卡在这里
2020-06-27 14:24:52
396
原创 centos7桥接模式联网转发,亲测可用
https://blog.csdn.net/weixin_42209440/article/details/102759869
2020-06-24 20:38:10
165
空空如也
求助Ajax无法请求到Servlet
发表于 2018-12-25 最后回复 2018-12-26
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人 TA的粉丝