- 博客(4)
- 收藏
- 关注
翻译 Coursera:Functional Programming Principles in Scala Cheet Sheet 翻译
Cheet Sheet 注:该文章为笔者学习MOOC上SCALA课程时所对照的备忘录,原翻译时通过markdown记录在有道云笔记上,csdn取消了在编辑时输入md的功能因此格式会有些奇怪。 (evaluation:类似于加载到内存中,进行计算)Evaluation Rules求值原则Call by value: evaluates the function argumen...
2018-05-28 19:58:46 308
翻译 SparkStreaming + Kafka集成指南(Kafka版本要求0.10.0以上)
SparkStreaming集成Kafka0.10版本与集成0.8版本Kafka的直接连接方式类似。提供了简单的并行性以及Kafka分区和Spark分区之间一对一的映射,以及元数据和偏移量的访问。然而,因为使用新版本的消费者的API而不是简单方式的API造成了一些使用上的不同。当前版本的APi是试验性的,因此可能会被修改。引入对于scala或者java使用Maven或SBT的应用,...
2018-05-25 21:25:06 9558 3
翻译 SparkStreaming + Kafka集成指南(Kafka版本要求0.8.2.1以上)
注意:spark2.3版本已经取消了对kafka0.8版本的支持   这里主要对如何配置SparkStreaming程序接受kafka的数据进行介绍。目前有两种方式:较老的方式是通过使用Receivers和Kafka的高阶API,新的方式(从spark1.3版本开始)不在使用Receivers。这是两种不同的编程模型、有不同的性能特征和不同的语义,更多细节求阅...
2018-05-15 21:31:47 1775
原创 java 使用openvc识别矩形(包含环境搭建)
最近因为项目需要在图片中截取身份证照片,原始图片大致如下 在安装opencv的环境时发现opencv提供了java的依赖包以及动态链接库,为javaer来说,提供了使用opencv的方式!1.环境配置使用方式很简单:只需要从:https://opencv.org/opencv-3-4-1.html上下载opencv的自动解压安装包,在解压后生成的文件opencv\build\java目录下找...
2018-05-13 17:29:40 3822
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人