hadoop - tensorflow 和 hadoop 的兼容性

标签 hadoop tensorflow

我想用tensorflow做机器学习库,hadoop做大数据框架。 但我不知道这些是兼容的。 我无法在网站中搜索任何引用资料。

我的问题是

  1. 我可以将 tensorflow 与 hadoop 一起使用吗?
  2. (如果否)请推荐可与 tensorflow 一起使用的大数据框架。

最佳答案

它们是兼容的。在我的公司,我们有使用 TensorFlow 在 Hadoop 上运行的应用程序。为了清楚起见,请将 TensorFlow 视为可以在 python 中使用的 python 库。一个示例是编写一个 Map-Reduce 代码,其中映射器对数据进行分组/累积,而在 reducer 中,您的学习代码存在于使用 TensorFlow 的 reducer 中。

关于hadoop - tensorflow 和 hadoop 的兼容性,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/38298452/

相关文章:

machine-learning - Tensorflow:确定药物剂量的用例

python - 在 Keras 中使用大于 2 Gb 的数据集

hadoop - 从MySql DB导入数据到MapR DB/HBase的选项

hadoop - 服务现在在尝试启动hdfs时困惑,无法启动nodemanager

hadoop - hadoop(PIG/MapReduce)如何处理非结构化文本数据

c# - 使用 HttpClient 的 .NET Core SPNEGO 身份验证

python-3.x - 将具有多种数据类型的python序列转换为张量

python - 如何在 Keras 中添加常量张量?

google-app-engine - 在 Google 应用引擎上部署 Mahout

tensorflow - 如何在 TensorFlow 中使用线性激活函数?