自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(7)
  • 收藏
  • 关注

原创 Jupyter Notebook 快捷键

Jupyter Notebook 有两种模式,一种是命令行模式(Command Mode, 蓝色单元格),一种是编辑模式(Edit Mode, 绿色单元格) 进入命令模式: ESC/ Ctrl + M 进入编辑模型: Enter/鼠标左键 编辑快捷键:帮助-编辑快捷键 1.1. 命令模式 (Command Mode) H 显示快捷键 1.1.1. 内核 I,I : 中断Notebook内核 0,0 : 重启Notebook内核 1.1.2. 单元格格式 Y: 单元格进入代码格式 M

2021-01-03 12:19:11 141

原创 Hive 库表操作: 创建,查看,修改,删除

Hive 库表操作: 创建,查看,修改,删除 参考链接: Hive Tutorial Hive LanguageManual 库操作 创建库 create database if not exist test; 创建库带注释 create database test comment "learning hive" location hdfs_path 查看数据库 show databases; 查看满足条件的数据库 show databases like 'price*' 显示数据库

2020-12-10 17:56:49 288 1

原创 Git 使用参考资料

设置本机邮箱与名字 git config --global user.email "you@example.com" git config --global user.email "you@example.com" 常用命令 git clone git add 命令可将该文件添加到缓存 git status 查看当前状态 git diff 命令显示已写入缓存与已修改但尚未写入缓存的改动的区别 git commit 将缓存区内容添加到仓库中 git reset HEAD 命令用于取消已缓存的内容 git

2020-07-22 14:29:31 249

原创 SparkSQL 内置函数: 聚合函数,集合函数,日期操作,数学,字符串操作

SparkSQL自带了一组功能丰富的内置函数,这些函数既可以用于DataFrame API, 也可以用于SQL接口。 内置函数可以分为几类: 聚合操作, 集合操作, 日期/时间, 数学, 字符串,窗口操作,其他。 from pyspark.sql import SparkSession import pyspark.sql.functions as F spark = SparkSession ...

2019-12-19 09:35:29 965

原创 pyspark.sql DataFrame创建, 常用操作以及输出到文件

Spark SQL 简介及参考链接 Spark 是一个基于内存的用于处理大数据的集群计算框架。它提供了一套简单的编程接口,从而使得应用程序开发者方便使用集群节点的CPU,内存,存储资源来处理大数据。 Spark API提供了Scala, Java, Python和R的编程接口,可以使用这些语言来开发Spark应用。为了用Spark支持Python,Apache Spark社区发布了一个工具PySp...

2019-11-29 20:14:23 3269

原创 win 10 安装tensorfow2.0-gpu

安装版本及时间 2019年10月25日 Win 10 python 3.6.5(anaconda) GTX 1050 Ti cuda_10.0.130_411.31_win10 cudnn-10.0-windows10-x64-v7.6.1.34 配置环境 cuda 安装会自动会自动配置, nvcc -V cuddn 解压拷贝到cuda 目录下,并配置环境变量 C:\Program Fil...

2019-10-25 14:04:16 219

原创 win 10 安装单点Spark+Hadoop+Python环境

window 10 下配置spark 2.0调试环境 1.下载文件: spark2.0.0 http://spark.apache.org/downloads.html scala2.10.4 http://www.scala-lang.org/download/2.10.4.html jdk 1.8.0_101 http://

2019-10-14 16:17:33 454

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除