7、能够使用反向代理Nginx进行请求的动静分离与服务器的负载均衡;
8、了解Storm架构,能使用Storm进行实时计算。
二、数据库相关技术
1、能够使用Hive和Hbase进行海量数据的分析处理;
2、能够操作MySQL数据库进行数据的存储;
3、熟悉MongoDB和Redis的使用。
三、编程语言
1、能够使用Java进行编程;
2、能够使用Scala进行Spark操作;
3、了解Shell脚本编程;
4、了解Python的基本使用。
四、其他
1、能够使用Spring、SprngMVC、SpringBoot、MyBatis等框架搭建项目;
2、熟悉Linux常用命令;
3、熟悉使用GitHub、Maven等开发工具。
·工作经历·____________________________________________________________
2017年4月-2019年3月
公司行业:计算机软件 工作职位:大数据开发工程师
工作职责:
1、主要负责大数据分布式存储;
2、离线数据来源的分析,实时数据的计算;
3、数据采集、清洗等方案的设计。
·项目经验·____________________________________________________________
项目一:
草民电影网数据分析 开发周期 2018年8月-2019年2月
技术实现:
Hadoop+Flume+Kafka+Mycat+Hive+Spark+SparkMLlib+