1.熟悉一种关系型数据库:
① Oracle、
② MySQL、
③ PostgreSQL、
④ hive、
⑤ mongodb、
⑥ reds、
⑦ clickhouse
⑧ GP即greenplum
2.熟悉数据仓库工具
① Hadoop分布式系统基础架构
② Hive数据仓库工具
1)熟悉UDF自定义函数
③ Spark。
1)Spark 是一种与 Hadoop 相似的开源集群计算环境
2)掌握 Spark的算子或SPARK SQL,理解 Spark Streaming更佳;
④ ElasticSearch。
1)Elasticsearch是一个基于Lucene的搜索服务器
⑤ Lucene。
1)是一个开放源代码的全文检索引擎工具包
⑥ Kafka。
1)Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据。
3.flask框架
1)Flask是一个轻量级的可定制框架,使用Python语言编写,较其他同类型框架更为灵活、轻便、安全且容易上手。它可以很好地结合MVC模式进行开发,开发人员分工合作,小型团队在短时间内就可以完成功能丰富的中小型网站或Web服务的实现。
4.有等语言编程能力
① java
② Scala
③ python
④ go
5.有协作开发管理平台Devops经验;
6.熟悉操作系统常用命令;
① linux
② unix
7.有MR开发经验优先
① 使用常用工具(包括Unity)开发沉浸式混合现实(MR)应用程序
8.熟悉常用ETL工具,有使用kettle\sqoop 等ETL工具的使用经验优先
9.熟练使用并理解 Hadoop架构和生态(如yarn、hdfs、 MAPREDUCE、hive、 HBASE、IMPALA、 ELASTICSEARCH、 SQOOP、 FLUME、 KAFKA等)
10.Greenplum、PostgreSQL函数开发经验;
11.有Hive、OushuDB、HAWQ使用经验
数据库开发工程师-招聘技能要求
最新推荐文章于 2023-09-18 16:37:44 发布