例如购买阿里云服务器,在上面搭建集群。
集群搭建不提,很多有相关文章。记两个自己踩过的坑。
注意一:
当需要进行数据收集的数据源在阿里的平台上时,
配置集群时尽量都用hostname,并且hostname对应的ip在hosts文件进行设置时,要都用内网ip。否则,向集群中传输文件时,不同服务器之间拷贝文件走的是公网,速度底下,且耗费资源。
使用内网ip后,在web访问界面,50070,8088端口可能无法正常访问。此时借助xsell。文件-->属性->隧道
若设置后未立即生效,可以关闭xsell后,再进行尝试。