接触的一些大数据平台及产品

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/clverhack/article/details/78919942

 列式数据库产品(nosql)

  1. clickhouse

  2. hp vertica

  3. marica CloumnStore

  4. Hbase

  5. Cassdara

  6. mongodb

  7. syllaDB 

hadoop 大分析

   1. Hive

   2. Spark

   3. Kylin

   4. presto

流式处理

   1. SPark

   2. Flink

   3. Storm

   4. ELK

搜索产品

   1. ElasticSearch

   2. Solr

云平台

  1. AWS

  2. IBM softlayer

  3. Aliyun

消息队列

  1. kafka

  2. rabbitMQ



  

展开阅读全文

接触了一些架构师,项目经理,有感而发。

02-21

今天看到非你莫属中的家宾位菊月,28岁,担任项目经理,拿到了1.5W的月薪。这让许多同行们产生了质疑。rnrn无聊之下我也羡慕嫉妒恨的发发牢骚。rnrn我认为他拿那么高的薪水是可能的,但是这和他个人的技术能力无关。这仅仅和经验有关。虽然这些经验根本无法让他组织开发出更好的产品。rnrn我认为的架构师应该是这样诞生的。程序员在入门前,还处在调查阶段,他要确定自己学习什么语言。入门后开始学习语言,处于代码积累阶段。当积累到一定的知识量,开始关心效率,安全,可二次开发,可继承。这个阶段持续非常长的时间。拥有一定的交流能力后,才能够成为一位架构师,架构师那是程序猿的最终发展方向。rnrn架构师是一个项目的心脏、核心、灵魂,他置关重要。rnrn中国的架构师,rn他可能只是一个好大学,代码都不怎么会,语言执行过程、语言核心、协议特点都不太明白,只是懂得各种入门的概念,这些概念五花八门,只要关于计算机的都有涉及,甚至如何制造CPU都能略说一二。rn而部分架构师更糟糕,仅仅是在什么学校或者培训机构培训两年就上任的。甚至还有一部分是深得领导喜爱而上任的。rn他们担任架构师后,根本无法起到架构师的作用,真正优秀的架构师应该懂得许多涉及到项目的语言,并且懂得这些语言的执行过程、语言核心。根据这些语言的特点写出高效、安全、稳定的项目核心后。根据核心来规范接口。组织程序猿使用接口操作核心。而这个核心就是项目的心脏,而这个架构师就是这个项目的心脏。rnrn中国的架构师,甚至只是象文员一样的类型,他们仅仅是接到客户需求后安排任务给程序猿而已。你可以认为中国的IT行业人才选择、职位安排上畸形。rnrn经常听到国外架构师写了什么什么核心代码,离职时,老总气得差点抗板凳砸人。rnrn实际30岁有了许多代码经验的程序猿才是培养成架构师的最佳人选。但是由于大家没有这样的认识,机会少。于是程序猿仅仅是变得高级了一些而已。许多无法学以至用的程序猿无法忍受,只好黯然转变行业。我一直认为这是中国程序猿的悲哀,他们很难走到程序猿的最终道路。rnrnrnrn也许有错,欢迎拍砖。 论坛

没有更多推荐了,返回首页