Tensorflow分布式介绍

很详细的分布式介绍:

https://www.imooc.com/article/44055 https://blog.csdn.net/luodongri/article/details/52596780 (比较旧)

• 介绍了分布式策略，分布式架构，
• 同步，异步优点缺陷
• 复制训练，tensorflow使用的分布式机制

https://blog.csdn.net/u012133034/article/details/81167040 (ps负载均衡)

各种类型（多机多卡等 ）:

https://blog.csdn.net/hjimce/article/details/61197190

grpc:

tensorflow分布式使用的结点通信方式（默认使用，必选方式） https://blog.csdn.net/GG_SiMiDa/article/details/81514561

google tensorflow分布式论文:

Martin Abadi、Ashish Agarwal、Paul Barham论文《TensorFlow:Large-Scale Machine Learning on Heterogeneous Distributed Systems》

http://download.tensorflow.org/paper/whitepaper2015.pdf?spm=5176.100239.blogcont335645.19.RCItSw&file=whitepaper2015.pdf

分布式代码基础结构：

https://www.cnblogs.com/estragon/p/10034511.html