部署spring boot项目到spark上

先说一下开发环境大概情况: IDE:IntelliJ IDEA 使用spring boot和gradle进行项目的构建 jdk版本 1.8,这里注意一下,开发环境打jar包时的jdk版本要和spark配置里的jdk的版本一致。 步骤 1、完成coding后,把当前module打成...

2018-01-16 17:12:27

阅读数 2317

评论数 1

python2.7和3.5的http请求(urllib, urllib等)

需求的请求格式: http://www.baidu.com/s?wd=word&time=time python2.7 # !/usr/bin/python # -*- coding:utf-8 -*- import urllib2 import urllib def send...

2018-01-08 21:26:19

阅读数 1752

评论数 0

SPARK基础概念

Spark集群 spark的核心模块专注于调度和管理虚拟机上分布式计算任务的执行,集群中的计算资源则交给Cluster Manager这个角色来管理。Cluster Manager一般采用Master-Slave结构。以Yarn为例,部署ResourceManager服务的节点为Mast...

2018-01-05 19:30:01

阅读数 115

评论数 0

(string)、toString()和String.valueOf()三种类型转换

1、(String)       这是标准的类型转换,将object转成String类型的值。使用这种方法时,需特别小心的是因定义为 Object 类型的对象在转成String时语法检查并不会报错,这将可能导致潜在的错误存在。这时要格外小心。 例: Object obj = new I...

2017-12-23 13:52:29

阅读数 1226

评论数 0

从原理到代码:大牛教你如何用 TensorFlow 亲手搭建一套图像识别模块

[转] http://www.leiphone.com/news/201703/JNPkCt08zJd9znzZ.html 自 2015 年 11 月首次发布以来,TensorFlow 凭借谷歌的强力支持,快速的更新和迭代,齐全的文档和教程,以及上手快且简单易用等诸多的优...

2017-07-19 13:56:48

阅读数 255

评论数 0

深度学习与计算机视觉

人工智能是人类一个非常美好的梦想,跟星际漫游和长生不老一样。我们想制造出一种机器,使得它跟人一样具有一定的对外界事物感知能力,比如看见世界。 在上世纪50年代,数学家图灵提出判断机器是否具有人工智能的标准:图灵测试。即把机器放在一个房间,人类测试员在另一个房间,人跟机器聊天,测试员事先不知道...

2017-07-18 17:43:27

阅读数 427

评论数 0

Java容器

简单的容器分类图。其中总共有四种容器:Map、List、Set和Queue,它们各有两到三个实现版本。常用的容器用黑色粗线框表示。点线框表示接口,实线框表示具体的类。带有空心箭头的点线表示一个特定的类实现了一个接口,实心箭头表示某个类可以生成箭头所指向类的对象。 接下来说一说Iterat...

2017-07-08 10:29:08

阅读数 103

评论数 0

阶乘问题

问题1.给定一个整数N,那么N的阶乘N!末尾有多少个0呢?例如:N=10,N!=3628800,N!的末尾有两个0. 问题分析 碰到这个问题,有些人可能回想:是不是要完整计算出N!的值?实际上可以从“哪些数相乘能得到10”这个角度来考虑,问题就变得简单了。 首先考虑,如果N!=K×1...

2017-07-03 15:10:20

阅读数 123

评论数 0

求二进制数中1的个数

Q:对于一个字节(8bit)的无符号整型变量,求其二进制表中“1”的个数,要求算法的执行效率尽可能高。 解法1 对于二进制操作,对一个二进制数除以一个2,原来的数字会减少一个0。如果除的结果中有余,那么就表示当前位置有一个1。 int Count(BYTE v){ int n...

2017-06-30 13:37:45

阅读数 117

评论数 0

Java GC

范围:要回收哪些区域 在JVM五种内存模型中,有三个是不需要进行垃圾回收的:程序计数器、JVM栈、本地方法栈。因为它们的生命周期是和线程同步的,随着线程的销毁,它们占用的内存会自动释放,所以只有方法区和堆需要进行GC。 前提:如何判断对象已死 所有的垃圾收集算法都面临同一个问题,...

2017-06-20 09:11:20

阅读数 165

评论数 0

Linux上go的安装配置以及简单使用

go语言在linux上的安装的使用

2017-06-06 13:55:10

阅读数 33811

评论数 3

提示
确定要删除当前文章?
取消 删除
关闭
关闭