Python 看门狗脚本 : load url asynchronously

标签 python linux networking asynchronous

我有一个简单的 Python 脚本,它会检查几个 url:

f = urllib2.urlopen(urllib2.Request(url))

因为我将套接字超时设置为 5 秒,所以有时需要等待 5 秒 * 结果的 URL 数量。

是否有任何简单的标准化方法来异步运行这些 url 检查而无需大量开销。脚本必须在 vanilla ubuntu 发行版上使用标准 python 组件(无需额外安装)。

有什么想法吗?

最佳答案

我写了一个叫做 multibench 的东西很久以前。我用它做的事情几乎和你想在这里做的一样,那就是调用 wget 的多个并发实例,看看需要多长时间才能完成。它是一种粗略的负载测试和性能监控工具。您需要稍微调整一下,因为它会运行相同的命令 n 次。

关于Python 看门狗脚本 : load url asynchronously,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/16139278/

相关文章:

linux - tail 在 linux 中动态创建的文件

linux - 如何在Shell脚本中多次检查if条件?

ios - GKSession 与 Mac OS X

python - Django + django-nose 的 PyCharm 代码覆盖率

python - pyzmq 创建一个具有自己的套接字的进程

linux - 自定义日志收集

iphone - 如何在iPhone上制作聊天系统?

c++ - 绑定(bind)到 127.0.0.2

python - 每个维度具有不同内核的 3D 高斯过程

python - 从函数/类返回后如何使列表为空