BugEveryday的博客

原创 Flink创建TableEnvironment

而在写代码时会发现，通过静态方法 TableEnvironment.create() 创建时，create()方法有两种参数，一种就是官网上的EnvironmentSettings，另一种是Configuration。同样，看EnvironmentSettings的构造方法也可以发现默认的RUNTIME_MODE是StreamingMode。此外，我看的是1.14.4的源码，发现默认的planner已经是BLINK，而OLD未来将不会保留。

原创 Flink-Java报错之org.apache.flink.api.common.functions.InvalidTypesException

An easy workaround is to use an (anonymous) class instead that implements the 'org.apache.flink.api.common.functions.FlatMapFunction' interface. Otherwise the type has to be specified explicitly using type information.可以搜索这个报错，有很多文章提到了解决方法，并给出了示例代码。

原创 clickhouse执行文件中的SQL

clickhouse可使用clickhouse client命令执行SQL，以select now();也可以将SQL写入文件后执行文件中的SQL。可以在命令行中写好SQL。多个SQL文件以空格隔开。

原创 python-requests库（爬虫）

网页数据获取有python自带的urllib，也有第三方库requests。

原创 Hbase-checkAndPut()方法

Hbase中关于表中数据的添加（修改）的方法，常用的是void put(Put put)，没有返回值但是如果put了相同的数据，那么就会报错，其实不是很友好所以，还有checkAndPut()方法 * Atomically checks if a row/family/qualifier value matches the expected * value. If it d...

原创 Hbase的hbase-default.xml文件位置

hbase-default.xml在hbase-common的jar包下

转载 /bin/bash^M: bad interpreter: 没有那个文件或目录【转载】

原文链接：https://blog.csdn.net/petpig0312/article/details/79797727在执行shell脚本时提示这样的错误主要是由于shell脚本文件是dos格式，即每一行结尾以\r\n来标识，而unix格式的文件行尾则以\n来标识解决方法：（1）使用linux命令dos2unix filename，直接把文件转换为unix格式；（2）使用s...

原创 Sublime Text 3 SFTP插件 连接sftp/ftp 上传文件

如何配置以连接到虚拟机可以看这个https://blog.csdn.net/BugEveryday/article/details/103268921SFTP插件有提供上传的功能，在应用的过程中，发现只要创建相应的文件夹，把文件放到该文件夹下就可以在sublime界面直接上传文件路径为\sublime-sftp-browse\sftp-config.json\放到任意位置都行，但是需要...

原创 对hive开窗函数 over中的partition by与group by理解

name orderdate costjack 2017-01-01 10jack 2017-02-03 23jack 2017-01-05 46jack 2017-04-06 42jack 2017-01-08 55mart 2017-04-08 62mart 2017-04-09 68mart 2017-04-11 75mart 2017-04-13 94使用如上数据...

原创 Sublime Text 3 SFTP插件 连接sftp/ftp

很多博客都有说如何安装插件，但是没有说明如何配置1.参见官方文档https://codexns.io/products/sftp_for_sublime/settings#Settings在修改完SFTP.default-config之后，要将该文件放到sublime安装目录的Packages/SFTP下主要配置以下内容2.创建sftp-config.json文件，放到...

原创 【MapReduce】总集

学习MapReduce的阶段性总结，开个坑，慢慢更新MapReduce已经预定义（或者说写好）了整个数据分析的流程，所以只按照相应的要求把业务需求融入进去就好。但是程序员就是放荡不羁爱自由。实际业务中的需求也是千奇百怪，所以我们在按照MapReduce的流程走的同时，针对具体的各个环节是可以自定义的。从Map阶段开始，可以采用不同的input的方式（TextInputFormat（默认），...

原创 Hadoop中hdfs-default.xml的位置

在hadoop安装包中hadoop-2.7.2\share\hadoop\hdfs\hadoop-hdfs-2.7.jar里面

原创 Hadoop集群开启后无法启动datanode

查看了网上的方法，大家的解决方法都是比较一致的，但是描述的不是很清楚，对我这种初学者有些不友好呀解决方法1.删除集群中所有节点的hadoop解压目录下的data目录以及logs目录删除所有节点，我有三个节点，在scp（安全复制）之前，没有把最初的节点的hadoop解压目录下的data目录和logs目录删除掉，所有也复制到其他节点了。但是出了问题之后，我一直都在删除最初的节点的data目...

转载 VMware虚拟机CentOS6Linux不能上网，主机能上网

查找了许多解决方法，但是都不行，所以就直接初始化网络设置了看参考https://jingyan.baidu.com/article/6c67b1d68facbb2786bb1e7b.html1、Linux网络设置： 1依次单击【System】-->【Preferences】-->【Network Connections】，如下图所示： 2依次单击【Wir...

原创 springmvc中@RequestParam传值中文乱码问题

传值的方式有get请求和post请求两类对于GET请求中文乱码问题是Tomcat服务器的编译导致的，Tomcat默认的编码是ISO8859-1。所以解决GET请求传值中文乱码的问题可以从Tomcat和自己写的代码两个方向来解决更改Tomcat配置解决在tomcat中server.xml中加上一个 URIEncoding=”utf-8”<Connector connec...

原创 【Maven】工程中可能用到的pom.xml

父工程的pom.xml中可能存在的标签 <!-- 指定打包类型，如果打包类型为jar，可以省略不指定，如果为war或者是pom,必须显示指定 --> <packaging>pom</packaging> <!-- 依赖的管理--子工程中都要使用到的jar包 【1】--> <depe...

原创 【Maven】中settings.xml可能用到的配置

setting.xml中可能要用到的配置，直接复制粘贴到Maven的settings.xml中的相应位置即可 <!—使用阿里云镜像 --> <mirror> <id>nexus-aliyun</id> <mirrorOf>central</mirrorOf> <...

原创 禁用Windows Defender Antivirus Service

网上能查到的常见的方法是：http://www.winwin7.com/JC/16097.html但是个人使用，好像没什么效果，而且修改之后Diagnostic Policy Service变的很异常，占用了大量内存后来发现Microsoft社区中有人提出的方法，见如下链接，该方法个人使用效果是可以的https://answers.microsoft.com/zh-hans/prote...

原创 copy qualified name复制类全名称的问题

在编写java代码的过程中，有时候需要类的全名称，如使用反射（Class.forName()）这时在eclipse中，可以使用copy qualified name获取类的全名称①选中【类名.class】文件，右键-->copy qualified name，得到test.Test如果选中的是【类名.java】，然后copy qualified name，得到的是/test/...

原创 Spring与Junit整合

Junit未与Spring整合时，如果想要测试，要这样写public class Demo{ @Test public void test1(){ //1.创建容器对象 ClassPathXmlApplicationContext ioc=new ClassPathXmlApplicationContext("spring-context....

原创 Spring中使用注解

使用spring，首先就要导入spring的4个核心jar包：beans、core、context、expression然后，要使用注解，就要引入 context 的约束 ：http://www.springframework.org/schema/context/spring -context.xsd以及配置注解扫描：<context:component -scan base...

原创 Redis

什么是RedisRedis是用C语言开发的一个开源的高性能键值对数据库。通过提供多种键值数据类型来适应不同场景下的存储需求，支持的数据类型有：字符串、散列、列表、集合、有序集合。官方提供测试数据：50个并发执行100000个请求，读的速度是110000次/s，写的速度是81000次/s。使用场景缓存（数据查询、短连接、新闻内容、商品内容等）聊天室的在线好友列表任务队列（秒杀、抢...

原创 NoSQL介绍

什么是NoSQLnot only SQL，不仅仅是SQL，是一种新的数据库理念，泛指非关系型的数据库为什么需要NoSQL高并发——对数据库高并发读写的需求高负载——对海量数据的高效率存储和访问的需求高扩展——对数据库的高扩展性和高可用性的需求NoSQL数据库的产生就是为了解决大规模数据集合多重数据种类带来的挑战，尤其是大数据应用难题主流NoSQL产品Redis Ca...

原创 SpringMVC

SpringMVC是什么是一个web层MVC框架，与Struts2类似javaee体系是四层结构：应用层application，需要安装的web层：Struts2，SpringMVC业务层：spring，EJB持久层：hibernate，mybatisSpringMVC参数封装SpringMVC没有成员变量，把需要传递参数对象放入方法中，当请求这个方法时，这个方法里...

原创 Mybatis整合spring

整合思路1.数据源信息交个spring管理2.sqlSessionFactory交给spring进行单例管理3.由spring来管理原始dao的实现类或者mapper代理的代理类&lt;?xml version="1.0" encoding="UTF-8"?&gt;&lt;beans xmlns="http://www.springframework.org/schema/be...

原创 Mybatis(1) -- 基本介绍

mybatis就是用来封装jdbc的持久层框架，和hibernate都属于orm框架，但是hibernate是一个完全的orm框架，mybatis是不完全的。mybatis会只将输入参数、输出结果进行映射mybatis让程序员只关注sql本身，而不需要去关注连接的创建、statement的创建等操作。原生态的jdbc代码public static void main(String...

原创 split方法与空格

字符串中有空格，想要用split分割，一般用split(" ")就可以了，或者如果有多个空格使用split(" +")但是有的时候这个空格可能是tab键，这种时候就要用java api中正则表达式里面的这个\s了而在使用中\s需要转义，也就是不能直接用split("\s")，而是split("\\s")同时如果不确定中间的空格到底是多少个的话，可以使用split("\\...

原创 com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Table 'XXX' doesn't exist

org.springframework.jdbc.BadSqlGrammarException: ### Error querying database. Cause: com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Table 'atcrowdfunding.t_usernum' doesn't exist### Th...

原创 java.net.ConnectException: Connection refused: connect

java.net.ConnectException: Connection refused: connectCaused by: java.net.ConnectException: Connection refused: connect at java.net.DualStackPlainSocketImpl.connect0(Native Method) ...

原创 Result Maps collection already contains value for

我是先生成了*Mapper.xml文件，然后拷贝到相应目录下的，然后启动tomcat的时候，出现了错误如果你也是这种情况，有可能就是mapper.xml文件的namespace不对，和当前路径不一致  然后，方法的id重名也会出现这种情况总之，拷贝有风险，粘贴需谨慎...

原创 在拼接的字符串里function传的值应该怎么写

先说应该怎么写，如下图一般来说，我们对function： delete(n.id,n.name)【n.id=1,n.name=zhangsan】拼字符串，是这么写"delete ('   +n.id+   ','   +n.name+   ')"但是这样写传过去的值，n.name的值zhangsan会被当成一个变量，而不是一个值所以要把zhangsan也给‘’上，但是''要被转...

原创 字符串拼接

一般我们是这样拼接字符串的但是，process.name是字符串，所以要用‘’引起来，但是‘’引了之后呢，还要\'来包一下才行所以，正确的操作是，\'      ' +  xxx  + '     \'...

转载 HttpServletRequest cannot be resolved to a type

除了HttpServletRequest cannot be resolved to a type之外的，各种xxxxx cannot be resolved to a type转载自：https://www.cnblogs.com/haimishasha/p/6188241.html 博主提供了两种方法，我只尝试了第一种就成功了1.这个错误可能是服务器自带的servlet库未...

原创 java.lang.ClassCastException: xxx.bean.XXX cannot be cast to xxx.bean.YYY

java.lang.ClassCastException: com.hahah.atcrowdfunding.bean.User cannot be cast to com.hahah.atcrowdfunding.bean.Role result写错了，应该是resultType，但是复制粘贴之前写的（resultMap），没有把result改掉，改成resultType以后一定...

原创 org.springframework.beans.InvalidPropertyException: Invalid property 'datas[0]' of bean class [com.h

org.springframework.beans.InvalidPropertyException: Invalid property 'datas[0]' of bean class [com.hahah.atcrowdfunding.vo.Data]: Index of out of bounds in property path 'datas[0]'; nested exception i...

原创 org.apache.ibatis.binding.BindingException: Mapper method 'com.hahah.atcrowdfunding.manager.dao.Cert

org.apache.ibatis.binding.BindingException: Mapper method 'com.hahah.atcrowdfunding.manager.dao.CertMapper.queryCount attempted to return null from a method with a primitive return type (int).检查xm...

原创 Failed to convert value of type 'java.lang.String' to required type 'java.lang.Integer[]'

Failed to convert value of type 'java.lang.String' to required type 'java.lang.Integer[]'; nested exception is java.lang.NumberFormatException: For input string: "id=415&amp;id=415"

原创 在拼接的字符串里链接应该怎么写

原创 eclipse中的汉字横着显示

Window-&gt;preference-&gt;General-&gt;appearance-&gt;Colors and Fonts--&gt;Basic-&gt;Text Font-&gt;Edit选择不以@开始的字体

原创 No qualifying bean of type [com.hahah.atcrowdfunding.manager.service.TestService] found for depende

org.springframework.beans.factory.BeanCreationException: Error creating bean with name 'testController': Injection of autowired dependencies failed; nested exception is org.springframework.beans.facto...