默默倾听全世界
码龄6年
关注
提问 私信
  • 博客：15,424
    社区：243
    问答：19
    15,686
    总访问量
  • 27
    原创
  • 323,769
    排名
  • 2
    粉丝
  • 0
    铁粉
IP属地以运营商信息为准，境内显示到省（区、市），境外显示到国家（地区）
IP 属地：山东省
  • 加入CSDN时间： 2019-01-19
博客简介：

weixin_44576373的博客

查看详细资料
个人成就
  • 获得6次点赞
  • 内容获得0次评论
  • 获得17次收藏
创作历程
  • 27篇
    2020年
成就勋章
TA的专栏
  • Java
    23篇
  • Spark
    21篇
  • Kafka
  • Spring Boot
    1篇
  • JavaScript
    3篇
创作活动更多

超级创作者激励计划

万元现金补贴，高额收益分成，专属VIP内容创作者流量扶持，等你加入！

去参加
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

python+selenium实现所有网站爬取

发布问题 2023.07.17 ·
3 回答

Java Spark算子：take 与 takeOrdered

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import java.util.Arrays;import java.util.List;/** * take（num）算子： ...
原创
发布博客 2020.02.26 ·
565 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

Java Spark算子：reduce

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.api.java.function.Function2;import java.util.A...
原创
发布博客 2020.02.26 ·
780 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：count 与 countByKey

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaSparkContext;import scala.Tuple2;import java.util.Arrays;import java.util.List...
原创
发布博客 2020.02.26 ·
330 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：coalesce

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import java.util.ArrayList;import java.util.Arrays;import java.util.L...
原创
发布博客 2020.02.26 ·
293 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：cartesian

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import java.util.Arrays;...
原创
发布博客 2020.02.26 ·
211 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：cogroup

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaSparkContext;import scala.Tuple2;import java.util.Arrays;import java.util.List...
原创
发布博客 2020.02.26 ·
220 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：join

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaSparkContext;import scala.Tuple2;import java.util.Arrays;import java.util.List...
原创
发布博客 2020.02.26 ·
395 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：sortByKey

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaSparkContext;import scala.Tuple2;import java.util.Arrays;import java.util.List...
原创
发布博客 2020.02.26 ·
563 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：reduceByKey

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.api.java.function.Function2;import scala.Tu...
原创
发布博客 2020.02.26 ·
816 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

Java Spark算子：groupByKey

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaSparkContext;import scala.Tuple2;import java.util.Arrays;import java.util.List...
原创
发布博客 2020.02.19 ·
400 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：distinct

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import java.util.Arrays;import java.util.List;/** * distinct（）算子 *...
原创
发布博客 2020.02.19 ·
267 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：intersection

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import java.util.Arrays;import java.util.List;/** * intersection算子：...
原创
发布博客 2020.02.19 ·
162 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：union

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import java.util.Arrays;import java.util.List;/** * union() 算子： * 取...
原创
发布博客 2020.02.19 ·
379 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：sample

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import java.util.Arrays;import java.util.List;/** * sample(withRepl...
原创
发布博客 2020.02.19 ·
204 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：mapPartitionsWithIndex

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.api.java.function.Function2;import java.util.A...
原创
发布博客 2020.02.19 ·
652 阅读 ·
0 点赞 ·
0 评论 ·
1 收藏

Jave Spark算子：mapPartitions

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.api.java.function.FlatMapFunction;import org.ap...
原创
发布博客 2020.02.19 ·
564 阅读 ·
0 点赞 ·
0 评论 ·
4 收藏

Java Spark算子： flatMap

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.api.java.function.FlatMapFunction;import java....
原创
发布博客 2020.02.19 ·
1845 阅读 ·
1 点赞 ·
0 评论 ·
3 收藏

Java Spark算子：filter

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.api.java.function.Function;import java.util.Ar...
原创
发布博客 2020.02.18 ·
1367 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Java Spark算子：map

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.api.java.function.Function;import java.util.Ar...
原创
发布博客 2020.02.18 ·
438 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏
加载更多