自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(60)
  • 资源 (1)
  • 问答 (1)
  • 收藏
  • 关注

原创 python实现PDF表格与文本分别导出EXCEL

将PDF的TABLE部分与 非 TABLE部分分别导出至Excel两个sheet中

2023-10-24 17:42:20 955

原创 cenos7 Job for network.service failed. See ‘systemctl status network.service‘ and ‘journalctl -xn‘问题

解决 Job for network.service failed. See 'systemctl status network.service' and 'journalctl -xn'问题

2022-08-16 11:26:39 588 1

原创 sql Rnak() 排名函数

**要求:图一转换为图二 ,排名函数 (sql server)**select cusnb ,score ,Rank() OVER( order by score desc) rankfrom table1 **要求(按照时间排序,计算用户两天间的分数score 差距)**图一图二思路: 按照用户进行分区,按照时间进行排名 select a.[name] ,a.[time] stime ,ISNULL(b.[time],a.[time]) eti

2021-08-09 14:09:02 456

原创 sql 查询数字 1-30 (存储过程)

1.创建数据库表CREATE TABLE `insertdata` ( `id` int(10) DEFAULT NULL) ENGINE=InnoDB DEFAULT CHARSET=utf82.创建存储过程DELIMITER $$ CREATE PROCEDURE insertdata() BEGIN DECLARE i INT ; set i = 1; WHILE i < 10 DO IN

2021-08-09 11:40:26 913

原创 springboot 整合mysql 异常 The server time zone value ‘Öйú±ê׼ʱ¼ä‘ is unrecognized

异常The server time zone value 'Öйú±ê׼ʱ¼ä' is unrecognized or represents more than one time zone. You must configure either the server or JDBC driver (via the serverTimezone configuration property) to use a more specifc time zone value if you want to uti

2021-05-14 10:19:28 95

原创 springboot-整合mysql 异常 The elements [spring.datasource.schema[0].classpath] were left unbound

异常错误:The elements [spring.datasource.schema[0].classpath] were left unbound原因classpath:后多添加了一个空格schema: - classpath: sql/spring_user.sql解决方法:

2021-05-14 09:59:47 562

原创 mysql 分组递归聚合

现有以下数据 :CREATE TABLE aa (id varchar(10) DEFAULT NULL,user_id varchar(10) DEFAULT NULL,money int(10) DEFAULT NULL,sum_money int(10) DEFAULT NULL) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4目标数据 :根据user_id 进行分组 ,根据id进行排序 ,id = 1 id_1_sum_mo

2021-03-29 11:44:41 409

原创 kettle双击打开Spoon.bat无法进入工具页面

kettle双击打开Spoon.bat无法进入工具页面 kettle双击打开Spoon.bat 就会卡在这个页面 然后过一会就无法响应了,之前用的时候好用,敢问各位大佬知不知道这个是怎么回事。打开log文件发现报错 Unable to create the database cache查看是需要找到系统用户目录下的 .kettle 目录:如:C:\Users\Administrator.kettle删除 db.cache*文件即可,再重新启动Kettle,便可以正常使用了 ...

2021-01-20 10:43:01 2331

转载 Flink 报错 Caused by: java.lang.ClassNotFoundException: org.apache.flink.api.java.ExecutionEnvironment

原因是因为: Flink 版本与 Flink Table 版本不对应导致的

2020-10-27 17:28:02 6174 2

原创 IDEA 程序报错(Error: A JNI error has occurred, please check your installation and try again)

编写程序是,jar包导入查询没有问题,正常程序编写没有问题,各别存在以下报错查询网络,有说是java版本问题的,尝试没有用java.lang.NoClassDefFoundError: org/springframework/context/ApplicationContext at java.lang.Class.getDeclaredMethods0(Native Method) at java.lang.Class.privateGetDeclaredMethods(Class.

2020-10-27 16:58:46 2869 2

转载 Pycharm+Django+Python 初次入门教程

创建应用applicationTemplates主要由html代码及逻辑控制块代码。创建app在终端中利用manage.py输入:python manage.py startapp myApp异常:缺少框架,导入框架NameError: name 'os' is not defined解决方法: settings.py import os没有安装mysql模块或者说安装的模块不对django.core.exceptions.ImproperlyConfigure

2020-10-26 15:42:01 535 2

原创 python实时监控电脑运行信息(邮件预警)

import timeimport psutilimport pymysqlimport re# 数据库连接配置def mysql(sql,data,table_name): # 配置数据库连接 conn = pymysql.connect( host='localhost', user='root', password='root', db='ssm', charset='utf8' ).

2020-10-20 15:38:53 1438 2

原创 mysql 跨服务、库数据联动

应数据需求,多链接数据库数据联动,查询教程,在本地mysql数据库打开FEDERATED引擎 即可1)查看Federated引擎是否开启mysql窗口输入show engines;如果有FEDERATED引擎,但Support是NO,说明你的mysql安装了这个引擎,但没启用,2)MySQL安装目录下找到配置文件 my.ini在[mysqld] 字段 文件末添加一行 federated ,重启mysql 即可3) 重启mysqlwin + r --> cmd --&

2020-10-19 13:53:34 230

原创 python + 夜神模拟器 + appium 小红书app数据抓取

环境搭建:执行命令pip install Appium-Python-Client安装 Android Studio(自带Android SDK)下载地址:https://developer.android.google.cn/studio/命令行窗口进入模拟器安装的bin路径 D:\Nox\bin,在终端输入 adb devices 命令,如果能显示手机信息则 android...

2020-09-07 17:08:40 7949 5

原创 java_mybatis_maven

整体架构目的输出结果![在这里插入图片描述](https://img-blog.csdnimg.cn/20200826140520175.png#pic_center根据上图读取dist_relation 表中 path 0-49953-928-5233-51887-52656关联lk_user 表中 role_id对path 截取 反向遍历分别判断 52656 的第一个 role_id= 3 的uid 设为 cloud_uid第二个 role_id =3

2020-08-26 14:13:15 217

转载 idea中运行没有问题,打成jar包,运行jar报错,

因为,之前不熟悉idea 浪费了我2个小时。影响了我的文档,以及同事后续的工作。非常对不起。这个错误让我更加了解java中的jar包,我要铭记 分析.首先打开你的jar.以zip的形式这是正常的这些target,out 代表你IDE jar里的文件,其实你根本不用打开jar,他...

2020-08-21 09:59:35 8452 4

转载 kettel调优(提高读写速度)

本文链接:https://blog.csdn.net/qq_37124304/article/details/82664665  由于Kettle提高表输出写入速度太低,每秒速度三四十,实在忍受不了,参考一些资料之后进行了以下改变,我只进行了第一项的速度每秒五六千,加上其他的测试速度有达到3万多,有一分钟二十多万的记录,没测试极限,下为更改的地方:NO.1mysql表输出的时候出现减速的原因可能是因为网

2020-07-20 18:29:49 1937

原创 linux cenos 6.9 安装kettle8.3.0可视化界面显示

第一步:安装 jdk1.8 略第二步:安装 kettle 8.3.0kettle 下载,上传,解压下载链接 https://nchc.dl.sourceforge.net/project/pentaho/Pentaho%208.3/client-tools/pdi-ce-8.3.0.0-371.zip上传 略解压 unzip pdi-ce-8.3.0.0-371.zip -d 解压路径在解压的路径下找到kitchen.sh所在的路径,进入该目录,通过chmod +x *.sh赋予.sh

2020-07-11 15:17:06 1644 1

原创 mysql 递归遍历 树结构

参考大佬地址mysql递归查询https://blog.csdn.net/weixin_35756522/article/details/81876534Mysql group_concat的反向应用实现(Mysql列转行)http://blog.chinaunix.net/uid-411974-id-3990697.htmlMySQL实现递归查找树形结构https://blog.csdn.net/qq_34120430/article/details/84969235创建表DROP T

2020-06-10 10:04:08 443

转载 MySQL实现递归树形结构

版权声明:本文为CSDN博主「居十四」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。原文链接:https://blog.csdn.net/qq_34120430/article/details/84969235 这两天,遇到了子节

2020-06-09 13:42:51 1245

原创 Flink DataSet API编程 (一) 数据集转换

jar包导入查看https://blog.csdn.net/weixin_44393345/article/details/106525426数据转换将一个或多个数据集转换为新的数据集。程序可以将多种转换组合成复杂的程序集。 程序运行主代码import org.apache.flink.api.java.ExecutionEnvironment;import org.apache.flink.api.java.operators.*;/** * @program: Flink .

2020-06-03 17:38:23 621

原创 Flink入门 wordcount——Java (代码)

官网讲解连接https://ci.apache.org/projects/flink/flink-docs-release-1.6/dev/batch/index.html#example-program导入jar包本地安装的是1.0版本的,修改成自己对应版本即可<!--java 依赖包导入--><dependency> <groupId>org.apache.flink</groupId> <artifactId>fl

2020-06-03 15:35:26 1515

原创 Flink集群启动报错 org.apache.flink.client.deployment.ClusterDeploymentException

org.apache.flink.client.deployment.ClusterDeploymentException Couldn’t deploy Yarn出现此类错误,主要的原因是Current usage: 75.1 MB of 1 GB physical memory used; 2.1 GB of 2.1 GB virtual memory used. Killing container.字面原因是容器内存不够,实际上是flink on yarn启动时检查虚拟内存造成的所以修改配置文

2020-06-03 09:36:54 8347

转载 Flink 集群搭建

Flink 集群搭建Flink 可以选择的部署方式有:Local、Standalone(资源利用率低)、Yarn、Mesos、Docker、Kubernetes、AWS。我们主要对 Standalone 模式和 Yarn 模式下的 Flink 集群部署进行分析。3.1Standalone 模式安装我们对 standalone 模式的 Flink 集群进行安装,准备三台虚拟机,其中一台作为JobManager(hadoop-senior01),另外两台作为 TaskManager(hadoop-se

2020-06-02 17:37:18 423 2

原创 IDEA中编写Scala程序报错scalac:jvm-1.8

在Intellij IDEA中编写Scala程序报错:Error:scalac: ‘jvm-1.8’ is not a valid choice for ‘-target’。Intellij IDEA版本是2019.1.3,JDK版本是1.8.0,Scala版本是2.10.5.解决方法:根据以下路径File->Settings -> Build, Exe...

2020-06-02 16:40:28 1063 1

原创 入门 Scala 代码 六 (函数,闭包)

//函数object Test0801 { // def 定义函数 //max 函数名 //(x:Int,y:Int) 参数名,参数类型 //:Int={} 返回值类型 def max(x:Int,y:Int):Int={ if(x > y) x else y } def main(args: Array[String]): Unit = { val a = max(1,4) printl.

2020-05-29 16:45:24 109

原创 入门 Scala 代码 五(set,map集合,元组,队列)

scala.collection.immutable包中的集合绝对是不可变的,函数式编程语言推崇使用immutable集合scala.collection.mutable包中的集合在是可变的,使用的时候必须明白集合何时发生变化set,map 集合//scala.collection.immutable包中的集合绝对是不可变的,函数式编程语言推崇使用immutable集合//scala.collection.mutable包中的集合在是可变的,使用的时候必须明白集合何时发生变化// set,map

2020-05-29 14:12:41 113

原创 入门 Scala 代码 四(list 集合)

List集合操作// 集合操作 list//List一但创建,其值不能被改变object Test0601 { def main(args: Array[String]): Unit = { //类型及特点 //A() //常用操作 B() } def A(): Unit ={ //字符串类型 list val A:List[String] = List("zhaoliying","yangmi","tongliya") prin

2020-05-28 16:51:11 158

原创 入门 Scala 代码 三(Array,ArrayBuffer)

数组 Array , ArrayBufferimport scala.collection.mutable.ArrayBuffer//数组 Array , ArrayBufferobject Test0501 { def main(args: Array[String]): Unit = { //定长数组 //println("定长数组") //A() //println() //println("变长数组") //变长数组 ArrayB

2020-05-28 16:22:23 145

原创 入门 Scala 代码 二(while,for,if)

数据类型,泛型//数据类型,泛型//Scala的基本数据类型头字母必须大写object Test03 { def main(args: Array[String]): Unit = { //Int val a = 0x29 //16定义进制法 val b = 421 // 十进制 println(a+" "+b) //Double,直接输入浮点数编辑器会自动推断为浮点数 //定义浮点数,需要在后面加F 或者f val c = 1.222

2020-05-28 16:19:44 108

原创 入门 Scala 代码 一(变量,方法)

变量object Test01 { def main(args: Array[String]): Unit = { // var 可声明变量 // val 相当于Java final一旦定义不得修改 var a:String = "buzhidao" println(a) //声明变量,可重复赋值 a = "aaa" println(a) val b :String= "buhzidaoss" //b = "aaa"

2020-05-28 16:17:31 143

转载 Java(冒泡排序)

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。本文链接:https://blog.csdn.net/qq_41679818/article/details/90296399 一.冒泡排序简介            比较相邻的元素。如果第一个比第二个大,就交换他们两个。    &

2020-05-28 15:25:51 89

原创 Spark on Yarn伪分布式集群搭建(Hadoop集成spark)

spark下载http://spark.apache.org/downloads.html所需环境jdk1.8 及其以上版本hadoop_2.6_cdh.2.4.5解压文件tar -zxvf spark-2.4.5-bin-hadoop2.6.tgz -C ../servers/进入conf目录修改配置文件复制原文件,修改后缀名cp spark-env.sh.template spark-env.sh修改文件,添加配置数据vim spark-env.sh#Hadoop

2020-05-27 15:41:39 406

转载 sql server导入Excel数据报错(microsoft.ACE.oledb.12.0异常)

我在网上找了一大批的教程,在官网下载完成后没有任何用,找到一位大佬的文章附带链接百度云–wwyu链接: https://pan.baidu.com/s/1D7wB6ZRG_wm4_qkGPMnlMg 提取码: wwyu 复制这段内容后打开百度网盘手机App,操作更方便哦提取码wwyu本文链接:https://blog.csdn.net/weixin_44668267/article/details/91489903...

2020-05-26 16:28:33 1224

原创 MapReduce_shuffle_Partition入门demo

jar包引用查看https://blog.csdn.net/weixin_44393345/article/details/106337623上传数据至hdfs,自定义就可以,测试hdfs dfs -put 上传文件 /上传地址代码mappper读取数据不进行操作,直接向下传递import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.NullWritable;import org.apache.had

2020-05-26 16:11:35 120

原创 is not allowed to connect to this MySQL server报错解决

主要的意思是这个host主机不能访问本机的mysql服务原因需要连接非本机的mysql的时候,默认host是localhost,我们需要将这个mysql连接权限设置成%更改方法直接通过软件更改和命令行更改:在mysql的数据库选择mysql这个数据库,里面有一个user表,进入表中有一个host字段将localhost值更改为%这个保存后,刷新或者重启MySQL服务都行。刷新的命令是flush privileges; 注意这里需要有;号否则不执行。...

2020-05-26 10:41:55 986

原创 kafka分区数的确定

1、kafka分区Kafka可以将主题划分为多个分区(Partition),会根据分区规则选择把消息存储到哪个分区中,只要如果分区规则设置的合理,那么所有的消息将会被均匀的分布到不同的分区中,这样就实现了负载均衡和水平扩展。2、各角色对分区的操作kafka的生产者和消费者都可以多线程地并行操作,而每个线程处理的是一个分区的数据。因此分区实际上是调优Kafka并行度的最小单元。对于producer而言,它实际上是用多个线程并发地向不同分区所在的broker发起Socket连接同时给这些分区发送消息;

2020-05-25 17:42:04 1262

原创 MapReduce_shuffle_入门(程序代码,本地运行与集群运行)

需求:在一堆给定的文本文件中统计输出每一个单词出现的总次数数据格式准备如下:创建文件,用于测试使用cd /export/serversvim wordcount.txthello,world,hadoophive,sqoop,flume,hellokitty,tom,jerry,worldhadoop文件上传hdfs上hdfs dfs -mkdir /wordcount/hdfs dfs -put wordcount.txt /wordcount/定义一个mapper类pub

2020-05-25 17:18:03 197

原创 HDFS_API入门demo(HDFS常用操作命令)

导入jar包<repositories> <repository> <id>cloudera</id> <url>https://repository.cloudera.com/artifactory/cloudera-repos/</url> </repository></repositories><dependencies> <d

2020-05-25 16:15:29 281

原创 CDH_HADOOP_2.6伪分布式环境搭建

安装环境服务部署规划服务器IP 192.168.52.100 192.168.52.110 192.168.52.120第一步:上传压缩包并解压将我们重新编译之后支持snappy压缩的hadoop包上传到第一台服务器并解压第一台机器执行以下命令cd /export/softwares/mv hadoop-2.6.0-cdh5.14.0-自己编译后的版本.tar.gz hadoop-2.6.0-cdh5.14.0.tar.gztar -zxvf hadoop-2.6.0-cdh5.14.0.t

2020-05-25 14:42:37 127

Appium1151.zip

appium 是一个自动化测试开源工具,支持 iOS 平台和 Android 平台上的原生应用,web应用和混合应用。 “移动原生应用”是指那些用iOS或者 Android SDK 写的应用(Application简称app)。 “移动web应用”是指使用移动浏览器访问的应用(appium支持iOS上的Safari和Android上的 Chrome)。 “混合应用”是指原生代码封装网页视图——原生代码和 web 内容交互。比如,像 Phonegap,可以帮助开发者使用网页技术开发应用,然后用原生代码封装,这些就是混合应用。 重要的是,appium是一个跨平台的工具:它允许测试人员在不同的平台(iOS,Android)使用同一套API来写自动化测试脚本,这样大大增加了iOS和Android测试套件间代码的复用性。

2020-05-08

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除