scala - Spark Streaming 包含文本

标签 scala hadoop apache-spark apache-spark-sql spark-streaming

我想在我的流文本中找到文本。

val myTwitter = TwitterUtils.createStream(ssc, None,)
val incoming = myTwitter.map(status => status.getText())

我想根据一个键分析传入的文本。如果它存在,如果不关心,我会采取。我该怎么做?
谢谢。

最佳答案

不应该

val myTwitter = TwitterUtils.createStream(ssc, None,)
val incoming = myTwitter.filter(status => status.getText().contains("twitter"))

工作?

关于scala - Spark Streaming 包含文本,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/33420452/

相关文章:

android - 是否可以在 android studio 的 java 文件中使用 scala 对象?

Scala:使用隐式证据的通用方法无法编译

mysql - java.sql.BatchUpdateException : transaction too large, 长度:300200

Scala - 返回与作为参数传递的类型相同的类型

java - 我可以在 hadoop 的配置 xml 中使用 Java 系统属性吗?

jsp - 如何在jsp或servlet中使用配置单元?我想创建一个使用配置单元查询的网站

hadoop - 从 Hadoop 集群中运行 web-fetch

sql - Spark SQL : Extract String before a certain character

java - 当我的spark作业出现内存不足错误时应该如何调试?

scala - 如何发出产生无限输出并立即返回的命令