pyspark 读tsv文件

__Hope__

已于 2023-08-16 10:18:20 修改

阅读量141

点赞数

分类专栏： Spark Python 文章标签： spark

于 2023-04-27 11:36:20 首次发布

本文链接：https://blog.csdn.net/guotong1988/article/details/130403179

版权

Spark 同时被 2 个专栏收录

146 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

Python

136 篇文章

订阅专栏

本文介绍如何利用PySpark读取和处理TSV格式的数据文件，探讨在大数据场景下进行数据预处理的方法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

from pyspark.sql import SparkSession
from pyspark.sql import DataFrame


spark = SparkSession.builder.appName("test") \
            .enableHiveSupport() \

了解本专栏

超级会员免费看