要导入哪个库来使用twitterutils.createstream来使用scala进行twitter spark流式处理

eni9jsuy  于 2021-07-14  发布在  Spark
关注(0)|答案(0)|浏览(155)

hi self是spark流媒体的新手,正在尝试使用在本地系统中进行流媒体。

IntelliJ IDEA -2021.1 X64 on Windows 7
sbt.version = 1.4.1

scalaVersion := "2.11.12"

spark 2.4.7

目标中进口产品的相关利用率如下所示

System.setProperty("twitter4j.oauth.consumerKey",consumerkey)
    System.setProperty("twitter4j.oauth.consumerSecret",consumersecret)
    System.setProperty("twitter4j.oauth.accessToken",accesstoken)
    System.setProperty("twitter4j.oauth.accessTokenSecret",accesstokensecret)
val stream = TwitterUtils.createStream(ssc,None,filters)

已尝试以下导入,但无法获取twitter使用

import org.apache.spark.streaming.twitter.TwitterUtils

在sbt中具有以下依赖项,但出现错误

libraryDependencies += "org.apache.bahir" %% "spark-streaming-twitter" % "2.4.7"

还有直接的twitter4j获取错误。
我可以从哪个图书馆取推特资料。
spark project external twitter-此存储库显示spark的最新版本为1.6.3,我也搜索过,但找不到任何合适的线索。任何帮助都是值得感激的。非常感谢。

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题