zhizaogongshe的博客

原创 专访华为2012实验室-助理科学家-李博杰：AI就像原子弹，不能落后于人

有些行业是直接涉及人的，没办法取代，比如像服务业，但有些很按部就班，做一个很固定、模式化的东西，就可以简化很多的劳动。而在比较大的范围内，可以用其他的通信模式，通信带宽要求没有那么高，比如说扩展到机架之间的时候，比如说我有1万个GPU，它可能是分成20个cluster，每个cluster有500个GPU，500个内部是高性能的通信，然后每个cluster和每个cluster之间用的是InfiniBand技术去做通信。在这里边，主要分为两类的通信，一类是超节点，或者说机架内的通信。