自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(4)
  • 收藏
  • 关注

原创 spark的匹配

段值的时候,会自动进行转换。在scala匹配某字。

2024-03-19 11:30:29 422

原创 scala使用sparksql遇到的小问题

因为我当时是读取数据中台的hive里面的表,通过jar包的任务部署的方式,所以在日志中打印schema是正常的,但在show的时候报错missing privileges。并且在数据中台用sql查询所需表也显示权限问题,所以获取一个表的schema信息应该是不需要权限或者权限很低。在读取所需表的dataframe,即使没有读取该表的权限,依然可以获取这个表的schema信息,即。

2024-03-06 11:35:22 403 1

原创 Linux中的常用命令

注:当删除硬连接时,不会删除原文件,删除原文件后,硬连接也不会被删除也不会被影响,其文件仍在同原文件的原地址上。(只有将硬连接和原文件都删除后,原地址上的文件才会被删除)[root@localhost home]# mv a.txt abc.txt //将文件a.txt重命名为abc.txt。tail -f /etc/services //滚动查看某个文件(一般该文件是日志文件,不断的有内容往里面写入)tar -zcvf aaa.tar.gz a.txt //要指定压缩包的名字,在压缩的文件之前。

2023-05-15 08:19:13 500 1

原创 Linux学习

Host-Only模式其实就是NAT模式去除了虚拟NAT设备,然后使用VMware Network Adapter VMnet1虚拟网卡连接VMnet1虚拟交换机来与虚拟机通信的,Host-Only模式将虚拟机与外网隔开,使得虚拟机成为一个独立的系统,只与主机相互通讯。其实就是你的虚拟机当做局域网中的一员,跟你的主机是平起平坐的。虚拟机的网段和主机的网段是一样的。弊端:假如你现在从学院回家了,主机的IP会发生变化,而你的虚拟机由于都是设置的静态,所以不发生变化,此时主机和虚拟机就不通了。

2023-05-15 08:16:57 48 1

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除