python - 如何修复 Twitter 30 天沙盒搜索上的错误代码 403?

标签 python api csv twitter tweets

我正在尝试从 Twitter 的 30 天沙箱搜索 API 收集推文并将其写入 csv 文件。我收到错误代码 403,但无法从错误消息中收集任何有用的信息。我查看了相关帖子,我要么已经尝试过他们所说的解决问题的方法,要么他们正在尝试做一些完全不同的事情(错误代码 403 似乎是许多类型问题的笼统错误代码)

我已经能够从标准搜索中收集推文,但我需要比过去 7 到 9 天内可用的数据更多的数据。我有一个 Twitter 开发者帐户,在我的仪表板上,它显示本月在 30 天搜索沙箱上仍有 250 个请求和 100 万条推文(我已使用 0 个)

下面是我的代码:

import csv
import settings as sett #file that includes my access token, consumer key and the secrets of each.
from TwitterAPI import TwitterAPI


api = TwitterAPI(sett.consumer_key, sett.consumer_secret, sett.access_token, sett.access_token_secret)
r = api.request('tweets/search/30day/:maruchan.json', {'query' : 'maruchan'})
                                     #^.......^To be honest I don't know what is supposed to go here, I just put something random, this might be the problem....

csvFile = open('maruchan.csv', 'a')
#Use csv Writer
csvWriter = csv.writer(csvFile)

for tweet in r:

    try:
        #Write a row to the csv file/ I use encode utf-8
        csvWriter.writerow([tweet.created_at, tweet.full_text.encode('utf-8'), tweet.favorite_count, tweet.retweet_count, tweet.id, tweet.user.screen_name])
    except tweepy.TweepError:
        pass
csvFile.close()

当我在 Jupyter 笔记本中运行此命令时,出现以下错误:

---------------------------------------------------------------------------
TwitterRequestError                       Traceback (most recent call last)
<ipython-input-122-0fe9d55ba54b> in <module>
     15 csvWriter = csv.writer(csvFile)
     16 
---> 17 for tweet in r:
     18 
     19     try:

~\Anaconda3\lib\site-packages\TwitterAPI\TwitterAPI.py in __iter__(self)
    217         :raises: TwitterConnectionError, TwitterRequestError
    218         """
--> 219         return self.get_iterator()
    220 
    221     def get_quota(self):

~\Anaconda3\lib\site-packages\TwitterAPI\TwitterAPI.py in get_iterator(self)
    204         """
    205         if self.response.status_code != 200:
--> 206             raise TwitterRequestError(self.response.status_code)
    207 
    208         if self.stream:

TwitterRequestError: Twitter request failed (403)

我对编码非常陌生,不知道自己在做什么,但我自己无法解决这个问题,所以如果有人可以帮助我,我将不胜感激。谢谢!

最佳答案

我明白了我的问题是什么。端点错误,csvWriter.writerow 的输入也错误。

端点: 对于端点,可以通过转到您的 Twitter 开发人员帐户找到您的环境名称,在右上角有一个包含您的用户名的下拉菜单,单击“开发环境”。这应该会带您进入开发环境列表,每个环境下应该是“开发环境标签”(在我的例子中,该标签是“研究”)。获取标签并将其放入您的 API 请求中,前面有一个冒号,后面没有“.json”。注意:对于完整文件搜索,只需将“30day”替换为“fullarchive”即可。

CSV 输入: 对于 CSV 输入,它们需要采用 tweet['aspect'] 的格式,其中 tweet 是我们迭代的任意变量名称,'aspect' 是请求的数据类型(例如 'text' 或 'created_at' )

下面是正确的代码以及一些注释。

import csv
import settings as sett #file that includes my access token, consumer key and the secrets of each. You get these by applying for a developer account and making an app
from TwitterAPI import TwitterAPI


api = TwitterAPI(sett.consumer_key, sett.consumer_secret, sett.access_token, sett.access_token_secret) #tells the Twitter API who you are.
r = api.request('tweets/search/30day/:research', {'query' : 'maruchan lang:en', #maruchan is the search term and lang:en filters for english results
                                                  "maxResults": "100", #number of tweets collected (starting from newer tweets)
                                                  "fromDate":"201906250000", #start data
                                                  "toDate":"201907010000" #end data (tweets will only be collected between these dates)
                                                           #YYYYMMDDHHmm #format of the fromDate and toDate input values
                                                  })

csvFile = open('maruchan_30_day_sandbox.csv', 'a') #'maruchan_30_day_sandbox.csv' is file name, 'a' is for append mode
#Use csv Writer
csvWriter = csv.writer(csvFile)

for tweet in r:
    #creates csv file with the listed elements seperated by a comma in each row         #encode('utf-8') helps read certain characters
    csvWriter.writerow([tweet['created_at'], tweet['user']['screen_name'], tweet['text'].encode('utf-8') if 'text' in tweet else tweet])
csvFile.close()

关于python - 如何修复 Twitter 30 天沙盒搜索上的错误代码 403?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/56803070/

相关文章:

python - 通过替换字符串的一部分来重命名多个文件夹中的子文件夹

python - 使用 WebRTC 和 Python 服务器进行人脸情绪分析

java - 使用处理 opengl 创建视频

json - 维基百科 API : parse a table as JSON?

c++ - 克服下载 CSV 文件进行解析时的问题。 Linux 与 Windows 换行符

Python多重继承问题

python - 无法在 AWS elastic-beanstalk 上提供 Django 静态文件

c# - 如何从 LumenWorks(快速 CSV 阅读器)创建带有 IDataReader 的自定义类以在具有多个不同文件版本的同时使用 SqlBulkCopy?

python - 如何安装 pydelicious Python del.icio.us API?

php - 将多行从 csv 插入到 mysql 并使用 AJAX 查看进度