我想用tensorflow做机器学习库,hadoop做大数据框架。 但我不知道这些是兼容的。 我无法在网站中搜索任何引用资料。
我的问题是
- 我可以将 tensorflow 与 hadoop 一起使用吗?
- (如果否)请推荐可与 tensorflow 一起使用的大数据框架。
最佳答案
它们是兼容的。在我的公司,我们有使用 TensorFlow 在 Hadoop 上运行的应用程序。为了清楚起见,请将 TensorFlow 视为可以在 python 中使用的 python 库。一个示例是编写一个 Map-Reduce 代码,其中映射器对数据进行分组/累积,而在 reducer 中,您的学习代码存在于使用 TensorFlow 的 reducer 中。
关于hadoop - tensorflow 和 hadoop 的兼容性,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/38298452/