spark
关注
分享
扫一扫
文章平均质量分 83
马蹄急66
这个作者很懒，什么都没留下…
展开
-
忽然遇到报错：ERROR spark.SparkContext: Error initializing SparkContext.
java.lang.IllegalArgumentException: System memory 100663296 must be at least 4.718592E8. Please use a larger heap size.在Eclipse里开发Spark项目，尝试直接在spark里运行程序的时候，遇到下面这个报错：很明显，这是JVM申请的memory不够原创 2016-05-06 15:36:12 · 24992 阅读 · 0 评论 -
数据本地化级别
Property NameDefaultMeaning spark.locality.wait3sHow long to wait to launch a data-local task before giving up and launching it on a less-local node. The same原创 2016-06-09 16:57:59 · 1669 阅读 · 0 评论