云端深度学习框架TensorFlow读取数据IO的高效方式

  • 时间:
  • 浏览:6
  • 来源:万人牛牛棋牌_万人牛牛棋牌官网

本文通过读取另一有一个多简单的CSV文件为例,帮助一群人快速了解如可使用TensorFlow高效的读取数据。CSV文件如下:

最近通过观察PAI平台上TensoFlow用户的运行请况,发现一群人在数据IO这方面还是有比较大的困惑,主要导致 分析好多好多 同学没办法 很好的理解本地执行TensorFlow代码和分布式云端执行TensorFlow的区别。本地读取数据是server端直接从client端获得graph进行计算,而云端服务server在获得graph过后还前要将计算分发到各个worker处里(具体原理都可不上能参考视频教程-Tensorflow高级篇:https://tianchi.aliyun.com/competition/new_articleDetail.html)。