kjc
工作内容
1、主要负责wedatasphere功能平台,应用工具(如dataspherestudio)、平台工具(如linkis)、数据工具(如qualitis)等功能工具系统的设计与开发实现;
2、加入基础平台运维资源池,负责hadoop/spark/hive/hbase/es/presto/kafka/flink等其中的某一个计算存储引擎的运维管理,bug修复/功能增强等相关二次开发;
3、所负责组件相关业务应用场景的,功能性/非功能性需求收集与满足,技术方案设计与项目支持;
4、深入理解所负责组件,及熟悉其相关依赖组件/系统工作原理(如linux,docker,jvm等),保障所负责组件稳定、高效运行,高效调优排障。
职位要求
1、熟悉java,熟悉spring和springboot,熟悉netty和jetty;熟悉shell/python/perl或其他脚本语言中的任意一门;
2、熟悉wedatasphere开源组件优先;有完整软件项目设计开发经验优先;熟悉scala/go/c/c++任意一门优先;熟悉springcloud者优先;
3、熟悉hadoop/spark/hive/hbase/es/presto/kafka/flink/alluxio等分布式计算存储组件中的任意一个优先;有相关二次开发经验优先;
4、熟悉服务器/存储/网络/os/中间件等基础架构基本元素优先,熟悉linux操作系统,具备较强的调优排障能力优先;熟悉docker/kubernetes/kubesphere者优先;
5、熟悉jupyterhub/kubeflow/sparkml/tensorflow/angel等任意一个机器学习框架/组件者优先;有机器学习平台建设/应用开发项目经验者优先;
6、大学本科及以上学历,计算机或者相关专业;
7、具备较强的主动承担意识和自我驱动力,良好的客户服务意识;
8、具备较强的主动学习意识和学习能力。
注:此岗位为上海灾备中心岗位