hadoop - webhdfs ://and hdfs://in terms of underlying protocol?之间有区别吗

标签 hadoop hdfs webhdfs

现在我正在通过 HttpFS 摄取日志,这在绝对数量上分崩离析。出于性能原因,我无法在边缘运行 JVM。所以我正在考虑使用 native 协议(protocol)进行摄取(我听说它是​​ IPC 或原始网络套接字魔术)

webhdfs HttpFS 底层

hadoop fs -put localfile -fs webhdfs://datanode:14000/hadoopfile

高清晰度电视??底层是什么

hadoop fs -put localfile hdfs://namenode/hadoopfile

最佳答案

恕我直言,实际上没有区别,因为这两种情况下的底层协议(protocol)都是 TCP/IP。

关于hadoop - webhdfs ://and hdfs://in terms of underlying protocol?之间有区别吗,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/17414821/

相关文章:

hadoop - 当我尝试运行任何需要M-R作业的复杂查询并且操作系统(ubuntu 16.4)注销到锁定屏幕时,我的 hive 1.2.1崩溃。

hadoop - Spark 1.4 缺少 Kafka 库

mysql - 使用 sqoop 将 mysql 查询导入到 hbase

neo4j - 如何将 csv 文件从 hdfs 加载到 neo4j 数据库中?

Hadoop webhdfs 处于安全模式,用户未通过过滤器错误进行身份验证

xml - 如何将 XML 数据导入 Hadoop

hadoop - YARN 阈值错误

hadoop - 我是 hadoop 的新手,正在学习基础知识。我最近安装了沙箱,但我无法运行 Hadoop 命令

hadoop - Dask:从 HDFS 读取时,pyarrow/hdfs.py 返回 OSError: Getting symbol hdfsNewBuilder failed

python-3.x - 使用 Python 通过 Kerberos 身份验证连接到 HDFS