williamjame的博客

三数之和思路标签：数组遍历首先对数组进行排序，排序后固定一个数 nums[i]nums[i]，再使用左右指针指向 nums[i]nums[i]后面的两端，数字分别为 nums[L]nums[L] 和 nums[R]nums[R]，计算三个数的和 sumsum 判断是否满足为 00，满足则添加进结果集如果 nums[i]nums[i]大于 00，则三数之和必然无法等于 00，结束循环如果 nums[i]nums[i] == nums[i-1]nums[i−1]，则说明该数字重复，会导致结果重复，

lv1、lv2:对应的视图名称lvs1、lvs2：生成对应的索引值,从0、1、2...开始递增lvws1、lvws2:视图的字段名称

1.异常检测基本概念异常检测：识别与正常数据不同的数据，与预期行为差异大的数据。1.1 异常的类别点异常：指的是少数个体实例是异常的，大多数个体实例是正常的。条件异常：又称上下文异常，指的是在1. 异常检测基本概念异常检测：识别与正常数据不同的数据，与预期行为差异大的数据。1.1异常的类别点异常：指的是少数个体实例是异常的，大多数个体实例是正常的。条件异常：又称上下文异常，指的是在特定情境下个体实例是异常的，在其他情境下都是正常的。群体异常：在群体集合中的个体实例出现异常的情况，而该个体

1. 异常检测基本概念异常检测：识别与正常数据不同的数据，与预期行为差异大的数据。1.1异常的类别点异常：指的是少数个体实例是异常的，大多数个体实例是正常的。条件异常：又称上下文异常，指的是在特定情境下个体实例是异常的，在其他情境下都是正常的。群体异常：在群体集合中的个体实例出现异常的情况，而该个体实例自身可能不是异常，在入侵或欺诈检测等应用中，离群点对应于多个数据点的序列，而不是单个数据点。1.2 异常检测任务分类有监督：训练集的正例和反例均有标签无监督：训练集无标签半监督：在训练集中

presto 执行sql 文件：/opt/edw/clients_presto/presto-cli --server ${ip:port} --source ${bdp} --user ${user} -f ${sql文件}presto 执行sql 语句：/opt/edw/clients_presto/presto-cli --server ${ip:port} --source ${bdp} --user ${user} --execute ${sql语句}...

hive sql行转列后 列转行场景：对拼接的手机号拆分后解密，解密完再拼接总结使用函数：concat_ws(’,’,collect_set(column))说明：collect_list 不去重，collect_set 去重。 column的数据类型要求是string

吴恩达深度学习笔记，不严谨之处还请斧正。2. 什么是神经网络？由一个或多个参数输入信息经过算法计算、计算后结果输出的过程可以看做一个计算单元，可以比作神经元。一个或多个计算单元的输出可以是做另一个计算单元的输入，多个输入、输出相连接的计算单元可以看做计算图，可以比作网状的神经结构。除了两端的输入层和输出层，中间计算单元可称作隐藏单元。3. 用神经网络进行监督学习神经网络算法威力的爆发...

【代码】Hql取上周、上月、上季度、去年第一天和最后一天。

hive loading 时嵌套目录报错添加set hive.mapred.supports.subdirectories=true;

一、语言概述编程范式编程范式是指计算机编程的基本风格或典范模式。常见的编程范式主要包括命令式编程和函数式编程。面向对象编程就属于命令式编程，比如C++、Java等命令式语言是植根于冯·诺依曼体系的，一个命令式程序就是一个冯·诺依曼机的指令序列，给机器提供一条又一条的命令序列让其原封不动地执行函数式编程，又称泛函编程，它将计算机的计算视为数学上的函数计算函数编程语言最重...

1. 云数据库概述1.1. 云计算是云数据库兴起的基础1.2. 云数据库概念云数据库是部署和虚拟化在云计算环境中的数据库。云数据库是在云计算的大背景下发展起来的一种新兴的共享基础架构的方法，它极大地增强了数据库的存储能力，消除了人员、硬件、软件的重复配置，让软、硬件升级变得更加容易。云数据库具有高可扩展性、高可用性、采用多租形式和支持资源有效分发等特点。1.3. 云数据库的特性...

1. NoSQL简介通常NoSQL数据库具有以下几个特点：(1)灵活的扩展性。(2)灵活的数据模型。(3)与云计算紧密结合。2. NoSQL兴起的原因关系型数据库已经无法满足web2.0的需求。主要表现在以下几个方面： 关系型数据库已经无法满足web2.0的需求。主要表现在以下几个方面：(1)无法满足海量的数据管理需求。(2)无法满足数据高并发的需求。(3)无法满足高可扩展性...

判断文件是否存在import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;public class Chapter3 { public static void main(Strin...

使用hadoop jar 命令运行jar包：./bin/hadoop jar ./myapp/HDFSExample.jar使用linux命令运行jar包java -jar /myapp/HDFSExample.jar

sed -i 's/原字符/目标字符/g' sed -i 's/原字符/目标字符/g' `grep 原字符 -rl ./`格式: sed -i 's/查找字段/替换字段/g' `grep 查找字段 -rl 路径` 文件名-i 表示inplace edit，就地修改文件-r 表示搜索子目录-l 表示输出匹配的文件名s表示替换，d表示删除示例：sed -i ‘...

1. 业务处理优化原则Hive对复杂SQL没有关系形数据库表现好，业务过程可使用临时表使用过程更清晰简单；关联条件尽可能避免使用函数、正则表达式。使用MAPJOIN()会将较小的表 加载到内存中，使连结过程在Map阶段完成分区避免数据倾斜问题。jobs数比较多的作业运行效率相对比较低。可选择tez方式加快小数据量的查询速度。不要求全局有序时使用Distribute By + S...

du -ah --max-depth=1 a表示显示目录下所有的文件和文件夹（不含子目录），h表示以人类能看懂的方式，max-depth表示目录的深度。du -sh 查看当前目录总共占的容量。而不单独列出各子项占用的容量du -lh --max-depth=1 查看当前目录下一级子文件和子目录占用的磁盘容量。...

iconv --list ：列出iconv支持的编码列表iconv -f 原编码 -t 新编码 filename -o newfile -f ： from 来源编码 -t ： to 转换后新编码 -c： 忽略无效字符 -s： –silent，忽略警告 -o file ： 可选，没有的话直接转换当前文件， 使用-o 保留源文件。...

TRIM()函数去掉最后一个字符select TRIM('市' from region_desc) from dual;