- 博客(5)
- 收藏
- 关注
RSS订阅原创 spark2.4.X 安装 mac
首先，在安排前要确保已经安装了java和Scala，因为spark对scala有依赖，而scala对java有依赖。如果没有安装java，直接去官网下载，然后解压安装，在/etc/profile中添加环境变量。如果已经安装了java，没有安装scala，则去scala官网下载一份压缩包，把压缩包解压到指定的目录下，然后在etc/profile中添加环境变量。怎么添加环境变量？随便百度一下就好，答案很多。java和scala都安装好以后，注意，就可以安装spark了。这里放一个spark2
2022-04-29 16:41:54
192
原创 Cannot add task ‘wrapper‘ as a task with that name already exists.
将task wrapper(type: Wrapper) { gradleVersion = '1.12'}修改为wrapper{ gradleVersion = '4.4' distributionUrl = distributionUrl.replace("bin", "all")}目前解决了这个报错，至于报错原因，stackoverflow上说是：Overriding built-in tasks deprecated in 4.8 now prod
2022-04-25 11:53:41
340
原创 关于密度聚类的一种GPU加速算法
论文来源 ：《G-DBSCAN: A GPU Accelerated Algorithm for Density-based Clustering》这篇论文提出了一种基于GPU的密度聚类算法，简称G-DBSCAN。在摘要中，作者说G-DBSCAN的速度比使用cpu的序列化DBSCAN要快100倍。那G-DBSCAN具体是怎么实现的呢？请看下文。在introduction部分，作者说这个算法的实现策略主要分为两步。第一步是构图，每一个object当成图的一个节点，当两个节点之间的相似度（例如欧
2021-09-16 20:59:48
1205
5
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人