python - Flask 线程共享值

标签 python multithreading flask redis sse

我有一个提取数据的 Flask 应用程序,然后转换该数据,然后将这些结果上传到数据存储库。我想将这一系列步骤“记录”到 Web UI,如果需要,还记录警告。

在同一个 Flask 应用程序中,我实现了 SSE(服务器发送的事件)并且它有效,但我无法“更新”事件以反射(reflect)应用程序的状态。有人能告诉我如何在不断更新浏览器的 SSE 和正在运行的应用程序之间“共享”数据,以便让用户了解数据处理的最新信息吗?或者也许是不同的方法?欢迎所有想法。我是 Flask 的新手。

这是 UI 所在的 views.py 模块:

from flask import render_template
import logging

logger = logging.getLogger(__name__)


def index():
    """ User Interface page """
    return render_template('index.html')

index.html

<!DOCTYPE html>
<html>
    <head>
        <title>Status</title>
        <script type="text/javascript" src="/static/js/sse.js"></script>
    </head>
    <body>
        <h1>Status</h1>
        <div id="status"></div>
    </body>
</html>

sse.js 在这里:

var sse = new EventSource('/status');
sse.onmessage = function(e) {
    console.log(e.data);
    document.getElementById('status').innerHTML = e.data;
};

这是 SSE 代码本身:

class ServerSentEvents(object):

    def __init__(self, data):
        self.data = data
        self.event = None
        self.id = None
        self.desc_map = {
            'data': self.data,
            'event': self.event,
            'id': self.id}

    def encode(self):
        if not self.data:
            return ''

        lines = ['{}: {}'.format(k, v) for k, v in self.desc_map.items() if v]
        return '{}\n\n'.format('\n'.join(lines))

使用 Redis 的状态实现:

from flask import Response
from .sse import ServerSentEvents
import logging

logger = logging.getLogger(__name__)


class EntityStatus():
    """ Broadcast application state """

    def __init__(self, red):
        self.red = red

    def status(self):

        def ready():
            pubsub = self.red.pubsub()
            pubsub.subscribe('status')
            for message in pubsub.listen():
                logger.debug('Status: {}'.format(message['data']))
                ev = ServerSentEvents(message['data'])
                yield ev.encode()

        return Response(ready(), mimetype='text/event-stream')

这是路由模块:

from .version import __version__
from .actions import index
from .actions import EntityStatus


def add_routes(app, red, etl):

    def _add_headers(response):
        """ Add custom response headers """
        response.headers['X-App-Version'] = __version__
        response.headers['User-Agent'] = 'Segments Engine'
        return response

    app.after_request(_add_headers)

    api = EntityStatus(red)

    app.add_url_rule('/', 'index', index)
    app.add_url_rule('/status', 'status', api.status)
    app.add_url_rule('/etl', 'etl', etl.etl)

这里是发送状态的代码的摘录:

class EntityApi(object):
    """ Entity API """

    def __init__(self, debug, red, data):
        self.debug = debug
        self.red = red

        self.red.publish('status', 'API Ready')

'index' 页面加载一个 js 脚本,该脚本成功指向并从服务器接收 SSE 数据并正确显示数据。 “status”是发送数据的地方,“etl”是进行实际数据处理的地方。

最佳答案

我修改了您现在看到的代码。使用 Redis 和 SSE 我现在已经设法在处理数据时将应用程序状态更新发布到 Web UI :) 我发现的通知示例和其他相关的 Redis 和 Celery 实现帮助我达到了这一点,谢谢大家 :)我只需要一个简单的解决方案,以后可以从这里进行改进和扩展。

关于python - Flask 线程共享值,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/45286449/

相关文章:

python - 我需要在第 n 个索引处插入一行,该行将对其下方的所有行进行求和

python - 从命令行运行时出现 ModuleNotFoundError

python - 自修复 Python 线程

python - 如何使用多组模板为 Flask 应用程序组织代码

python - 从表单获取数据,但根据 Flask 所在的页面运行函数

javascript - 在 selenium python 中单击 slider 按钮

python - 使用 str.format 输出到文件时出现 ValueError

Android 窗口 WindowLeaked - Activity 泄漏了最初在此处添加的窗口

java - 如何使用 JAVA 在 MATLAB 中进行显式多线程处理?

python - 每个 Flask session 存储大数据或服务连接