技术问题点解答
从常规技术点解答,分析技术深层含义
不埋雷的探长
深耕BigData技术,专注于大数据技术领域的知识分享。CSDN认证博客专家,目前就职于腾讯,内推可私聊~ 热爱软件,喜欢编程的阳光小伙子~ 千万千万不要放弃学习,千万千万要搞好人际关际,共勉~
展开
-
故障解决:spark 访问hive 库、表报错 org.apache.spark.sql.AnalysisException: Table or view not found
1、spark项目 + 外部配置文件【最优,如CDH平台,配置改变,无需重新编译、打包】2、spark项目(resources目录下存放hive-site.xml)【次之,如果配置变动需要更新配置文件,重新编译打包】3、spark项目(在代码中写死配置选项)【最差,涉及配置修改后,需要对代码修改,然后重新编译打包】...原创 2020-09-23 22:32:19 · 11567 阅读 · 10 评论 -
干货资源下载 —— Java/Jvm/Flink/SparkML/MySQL/HBase/ElasticSearch
Flink_思维导图(干货).xmind.zip 算法思维导图【全面】.xmind.zip Spark 机器学习.xmind.zip Java集合思维导图.xmind.zip TCP&SOCKET&三次握手全解.xmind.zip MySQL_思维导图(全面).xmind.zip 文章最后,给大家推荐一些受欢迎的技术博客链接:JAVA相关的深度技术博客链接 Flink 相关技术博客链接 Spark核心技术链接 ...原创 2020-09-20 09:30:14 · 2027 阅读 · 23 评论 -
什么是 DMP?
目录DMP (Data Management Platform)一、项目介绍二、技术方案DMP (Data Management Platform)数据管理平台,负责数据管理:收集用户数据;为用户数据打上标签;为DSP 提供数据服务业务介绍 技术实现对于业务介绍,比较困难的是理解广告交易过程中各个参与者是干什么的对于技术实现,大致就是如下两个步骤:报表 标签化报表显而易见,就是查看数据的组成,查看数据的图形直观特征标签化是整个项目的目的,最终其实就是要根据标签筛选原创 2020-09-19 17:28:59 · 18412 阅读 · 3 评论 -
英文自我介绍
Hello !My name is Leo, I’m very happy and excited for having a face to face interview in your company.I hope i can make a good performance today. Now I would like to introduce myself briefly.I am 29 years old, born in Guangdong province, graduated ..原创 2020-07-27 20:39:18 · 510 阅读 · 1 评论 -
HashMap 技术问题点解答
Hash的理解hash的基本概念就是把任意长度的输入通过一个hash算法之后,映射成固定长度的输出那你这里提到了任意长度的输入转化成固定长度的输出,会不会有问题?肯定会有问题的。在程序中(可能)碰到两个value值经过hash算法之后,算出同样的hash值,也就是会发生hash冲突那hash冲突可以避免么?理论上是没有办法避免的,就类比“抽屉原理”,比如说一共有10个苹果,但是咱一共有9个抽屉,最终一定会有一个抽屉里的数量是大于1的,所以hash冲突没有办法避免,只能尽量避免。你那认为稍微好一些原创 2020-09-10 22:08:54 · 3258 阅读 · 6 评论 -
大数据 —— 常见问题及答案
linux + shell常用的高级命令top iotop df -h grep sed awk netstat halt ps查看进程、查看端口号、查看磁盘使用情况top ps netstat df -h常用工具sed awk cut sort写过哪些shell 脚本集群启动停止脚本(zk.sh kf.sh xcall.sh myjps.sh xsync.sh)#! /bin/bashcase $1 in"start") { for I in hadoo原创 2020-09-10 22:06:35 · 1511 阅读 · 1 评论