scala
innersense
这个作者很懒,什么都没留下…
展开
-
SPARK YARN cCLUSTER模式及CLINET模式的启动过程
通过submit命令启动后${SPARK_HOME}/bin/spark-submit --master yarn-client --class com.bigdata.WordCount --executor-memory 2G \--num-executors 4 ${SPARK_HOME}/topn-1.0-SNAPSHOT.jar hdfs://spark-master:9000 /temp/inputdir /temp/outputdir实际上启动的是org.apache.spark原创 2020-08-08 17:47:50 · 255 阅读 · 0 评论 -
Spring Boot与scala结合 case class转化成json的两种方法
两种方法 ,一种是使用json4s库转换成字符串,然后用注解produces = Array("application/json;charset=UTF-8")标明返回的content-type类型,另外一种方法是将case class的属性注解为BeanPropertyimport org.json4s.DefaultFormatsimport org.springframework...原创 2020-03-17 11:25:45 · 885 阅读 · 0 评论