tang_xiaotang的博客

因子   现在一些接口交互的时候回用到各种加密算法，现在总结一下我遇到的几个算法。1. MD5加密MD5消息摘要算法，属Hash算法一类。MD5算法对输入任意长度的消息进行运行，产生一个128位的消息摘要。以下所描述的消息长度、填充数据都以位(Bit)为单位，字节序为小端字节。算法原理1、数据填充对消息进行数据填充，使消息的长度对512取模得448，设消息长度为X，...

引子最近公司需要请求数据接口去获取数据，用到了get请求和post请求，总结一下get请求：get请求参数是携带在url里面的，在？后面携带参数，每个参数之间用&隔开，举例：www.baidu?name=lisan&age=18如果参数里面有中文要把中文转成unicode编码，代码很简单：val client = new HttpClient//...

 此代码是spark用于从mysql中读取数据val conf = new SparkConf() .setMaster("local[*]") .setAppName("用户标签")val sc = new SparkContext(conf)val sqlC = new SQLContext(sc)val url = "jdbc:mysql://地址/数据库名"v...

for (entry <- dataJson.entrySet) { val dataValue = entry.getValue.toString }在scala编程的时候，遍历entrySet报错。解决方法: 因为reducedList是java.util.HashMap, 没有foreach方法, 所以需要将其转换为Scala的集合类型, 因此需要...

废话少说，直接上代码。 val now: Date = new Date() val gt = now.getTime var time = gt + "" val client: HttpClient = new HttpClient val method: GetMethod = new GetMethod(url) client.exec...

1.改，update//连接信息 val onlineUrl = "jdbc:mysql://" val username = "root" val password = "1234" def getOnlineConnection(): sql.Connection = { DriverManager.getConnection(onlineUrl...

用spark实现读取csv文件val conf = new SparkConf() .setAppName("用户标签") .setMaster("local[*]") val sc = new SparkContext(conf) val sqlContext = new SQLContext(sc) val arr = ArrayBuff...

scala是用java封装得，所以可以打包放在服务器上用java命令运行。打包1.点击Maven Projects2.点击clean3.点击package这样就成功啦上传到服务器运行java -cp 包地址 程序路径 参数java -cp Mark-1.0-SNAPSHOT.jar pan.dataPlatform.Update 北京...