笔记
文章平均质量分 74
Lee_Yuanyuan
这个作者很懒,什么都没留下…
展开
-
Centos7/RedHat7安装NVIDIA显卡驱动手册
Linux系统一般默认安装的是开源的nouvea显卡驱动,它与nvidia显卡驱动产生冲突,欲装nvidia必禁nouvea!一、关闭secure boot(坑1)检测NVIDIA驱动root用户下,执行如下命令查看N卡硬件是否正常辨识 lspci|grep -i nvidia查看系统内核版本# uname -r3.10.0-693.el7.x86_64 """不同操作系统的内核版本会不一样,记住它后面有用"""# df """确认 boot 目录的空间不少于 300 MB.原创 2021-07-07 15:41:17 · 2451 阅读 · 1 评论 -
Spark Core笔记
Spark Core笔记Spark一、What is SparkApache Spark is a fast and general engine for large-scale data processing二、Spark框架优势数据结构:RDD,用于存储和管理数据DAG 调度 Spark 中每个Job运行的调度都是DAG调度 DAG:有向无环图计算过程中...原创 2018-08-16 20:01:06 · 990 阅读 · 0 评论 -
强大的Python数据分析工具——Pandas
tags:Python一、Pandas基础1、Pandas简介 Pandas是一个开源的,BSD许可的库,为Python编程语言提供了高性能,易于使用的数据结构和数据分析工具 2、Pandas基本数据结构-Series Series是一种类似于一维数组的对象,它由一组数据(合种Numpy数据类型)以及一组与之相关的数据标签组成。仅由一组数据即可...原创 2018-08-16 20:12:12 · 1648 阅读 · 0 评论 -
Spark Streaming
一、Apache Spark核心编程模块(基础编程)集批处理(离线处理)、交互式处理和流式处理为一体的一栈式大数据解决框架1、Core最核心,Spark其他所有模块的基础 数据结构:弹性分布式数据集RDD SparkContext: sc 批处理(batch processing),处理数据 N + 1注意: 每次处理的数据都是一个固定的数据集,不是变化的2...原创 2018-08-16 20:44:32 · 265 阅读 · 0 评论