大数据
文章平均质量分 72
孰与徐公比美 NO,NO
这个作者很懒,什么都没留下…
展开
-
spark连接Cassandra
public static void main(String[] args) throws ParseException { final String st = "2019-01-01 00:00:00"; final String et = "2020-01-01 00:00:00"; SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss"); Date date.原创 2020-10-09 16:39:06 · 538 阅读 · 0 评论 -
大数据相关概念随笔
MapReduce模型简介:实现步骤:(1)对于大量的数据集,且分为非常多的独立小分片(2)然后为每一个分片单独的启动一个map任务(3)最终通过多个map任务,并行的在多个机器去处理理念:计算向数据靠拢,只要有可能,MapReduce框架就会将Map程序就近在HDFS数据节点运行,即将计算节点和储存节点放在一起运行,减少节点数据之间的易懂开销。核心函数:Map函数和Reduce函数...原创 2020-09-21 23:40:56 · 160 阅读 · 0 评论 -
java-cassandra
三、使用Java驱动类实现对Cassandra的增删改查1、第一个代码package com.xxx.test; import java.util.List; import com.datastax.driver.core.ResultSet;import com.datastax.driver.core.Cluster;import com.datastax.driver.core.Row;import com.d...转载 2020-09-16 10:59:04 · 210 阅读 · 0 评论 -
netty-实例
一,基本格式:1,主要jar包:<dependency> <groupId>io.netty</groupId> <artifactId>netty-all</artifactId> <version>4.1.30.Final</version> </dependency>2,主要程序客户端:package com原创 2020-08-05 11:45:48 · 139 阅读 · 0 评论 -
Dijkstra算法
package com.xl.test01;import java.util.HashMap;import java.util.HashSet;import java.util.Map;import java.util.Set;public class Node { private String name; private Map<Node, Integer> child = new HashMap<Node, Integer>(); public原创 2020-08-05 11:28:46 · 115 阅读 · 0 评论 -
BP网络神经算法
线性拟合:线性拟合是曲线拟合的一种形式。设x和y都是被观测的量,且y是x的函数:y=f(x; b),曲线拟合就是通过x,y的观测值来寻求参数b的最佳估计值,及寻求最佳的理论曲线y=f(x; b)。当函数y=f(x; b)为关于b的i线性函数时,称这种曲线拟合为线性拟合。多项式拟合:多项式拟合的目的是为了找到一组p0-pn,使得拟合方程尽可能的与实际样本数据相符合相关程序:https://www.cnblogs.com/maplethefox/p/11468296.html最小二乘法最小二乘法原创 2020-07-25 22:46:34 · 256 阅读 · 0 评论 -
MyBatis
一,入门程序需求:1、根据用户id查询用户信息开发步骤:1.建立工程2.导入所需jar包3.创建po4.创建SqlMapConfig.xml 随便取 今天我们放在config下5.创建User.xml sql语句都定义在这文件下6.在 SqlMapConfig.xml 文件中配置 User.xml7.测试8.创建log4j.properties2、根据用户名称模糊查询用户...原创 2020-04-02 17:24:03 · 224 阅读 · 0 评论 -
Scala
一,定义一些变量:Scala定义了两种变量val,varval类似于Java中的final变量,一旦初始化不能重新赋值var类似于一般的变量,定义后可以重新赋值例如:val msg="Hello,World;"val msg2:String="Hello,World";//两者相同Scala不需要以“;”结尾;二,定义一些函数def max(x:int,y:int):int={...原创 2019-11-11 09:27:06 · 108 阅读 · 0 评论 -
AIS
AIS(Automatic identification System 船舶自动识别系统)是一种船载广播应答系统,通过该系统,船舶能够在VHF公用无线信道上向附近的船舶和岸上主管机关持续发送其身份,位置,航向,航速和其他数据。按历史沿革来说,AIS是一种被称为SOTDMA的软件程序相融合的设备。SOTDMA的概念来源于瑞典学者Hakan Lans,他于20世纪80年代进行一项先驱性的工作——发展了...转载 2019-09-15 22:07:22 · 1483 阅读 · 1 评论