Mysql 时间转换 && 时间函数 1.时间转换涉及的函数:DATE_FORMAT(date,format) MySQL日期格式化函数STR_TO_DATE(str,format) MySQL字符串格式化为日期UNIX_TIMESTAMP() MySQL其他数据转换为时间戳FROM_UNIXTIME(unix_timestamp,format) MySQL时间戳格式化函数1、时间转字符串:select date_format(now(), ‘%Y-%m-%d’);结果:2022-04-082、时间转时间戳:se
Flume概述与使用 文章目录Flume概述1.什么是Flume2.名词介绍3.Flume架构介绍4.可靠性和可用性Flume的安装与使用Flume概述1.什么是Flume可以理解flume是日志收集系统,Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种...
从lucene到ElasticSearch 文章目录初识 Lucene1.什么是LuceneElasticSearch1.介绍2.基本概念初识 Lucene1.什么是LuceneLucene 是一个基于 Java 的全文信息检索工具包,它不是一个完整的搜索应用程序,而是为你的应用程序提供索引和搜索功能。Lucene 目前是 Apache Jakarta 家族中的一个开源项目。也是目前最为流行的基于 Java 开源全文检索工具包。...
Hive SQL语法详解 文章参考博客链接-------Hadoop Hive sql语法详解文章参考官方hive依赖于HDFS存储数据,Hive将HQL转换成MapReduce执行,所以说Hive是基于Hadoop的一个数据仓库工具,实质就是一款基于HDFS的MapReduce计算框架,对存储在HDFS中的数据进行分析和管理Hive 是基于Hadoop 构建的一套数据仓库分析系统,它提供了丰富的SQL查询方式...
面试必备基础知识点 这里大部分是整理自该篇帖子(侵删)计算机网络计算机网络分层计算机网络如果是ISO模型的话,分为七层。TCP/IP协议簇模型的话,分为四层。TCP和UDP有什么区别?什么场景使用TCP,什么场景什么UDP?哪些应用层协议使用了TCP,哪些使用了UDP?这一块需要好好看。TCP和UDP最主要的区别是TCP是可靠传输的,UDP是不可靠传输的。所以如果我们的发送消息之类的场景,因为你要确保用...
TCP和UDP的区别以及各自对应的各种应用层协议和应用 这里码一下基础知识:TCP(Transmission Control Protocol,传输控制协议)和UDP(User Datagram Protocol,用户数据报协议)是运输层的两个主要协议,均是互联网的正式标准。TCP:优点:可靠,稳定TCP的可靠提现在传递数据之前,会有三次握手来建立连接,而且在数据传递时,有确认、窗口、重传、拥塞控制机制,在数据传完后,还会断开连接用来节约系统资...
遇到 Exception in thread "main" java.io.IOException: No FileSystem for scheme: hdfs解决办法 问题:Exception in thread “main” java.io.IOException: No FileSystem for scheme: hdfs工作过程中遇到了这个问题,调用org.apache.hadoop.fs.FileSystem这一套API来对hdfs上面的文件进行操作,但是本地运行正常的代码打包上传到服务器上发现运行会报错Exception in thread “ma...
再学计算机网络 目录目录网络的网络ISP主机之间的通信方式时延计算机网络体系结构OSITCP/IP数据在各层之间的传递过程物理层数据链路层网络层IP 数据报格式网络的网络网络把主机连接起来,而互联网是吧多种不同的网络连接起来,因此互联网是网络的网络ISP互联网服务提供商ISP可以从互联网管理机构获得许多IP地址,同时拥有通信线路以及路...
动态规划小结 讲一讲动态规划动态规划,一听起来就很高大上的样子,也因此很多人望而却步,不愿意理清楚他的逻辑,但是实际上这只是一种方法而已,并没有什么可怕的。首先说一下动态规划,总结起来就是一句话大事化小,小事化了,例如,给你一段10m长的绳子让你剪成几段,求最么剪能让每一段的长度之积最大,这很明显就是一个动态规划的问题,那我们来理一下,10m长的绳子你不知道,1m长的绳子你知道嘛,2米呢,3米呢,这...
Java设计模式之观察者模式 目录简介结构图四个角色代码示例小结目录简介在对象之间定义了一对多的依赖,这样一来,当一个对象改变状态,依赖它的对象会收到通知并自动更新。其实就是发布订阅模式,发布者发布信息,订阅者获取信息,订阅了就能收到信息,没订阅就收不到信息。有点类似于收听广播,你收听了就会被通知到,反之则不能。主要解决的问题:一个对象状态改变给其他对象通知的问题,而...
小结 目录目录AlluxioScalatraJettyWeb服务器Servlet容器Servlet容器和Web服务器如何处理一个请求?Alluxio参考文章Alluxio是一个基于内存的分布式文件系统,它是架构在底层分布式文件系统和上层分布式计算框架之间的一个中间件,主要职责是以文件形式在内存或其它存储设施中提供数据的存取服务。在大数据领域,最...
linux脚本编写小结 传参数例子:./xxx.sh “xxxx”(运行前需要赋予一下权限 chmod xxx filename) 文件内:#!/bin/sh name=$1 这样”xxxx”就赋给了name改写命令例子:创建一个.bashrc文件,在里面写上 alias a=’b’ 然后source一下就可以用a代替b命令了脚本快速执行很复杂命令直接在里面写就行了...
抽象类和接口 目录目录抽象类接口抽象类与接口的区别抽象类我们都知道在面向对象的领域一切都是对象,同时所有的对象都是通过类来描述的,但是并不是所有的类都是来描述对象的。如果一个类没有足够的信息来描述一个具体的对象,而需要其他具体的类来支撑它,那么这样的类我们称它为抽象类。比如new Animal(),我们都知道这个是产生一个动物Animal对象,但是这个Animal具体长成...