Gradio 月活用户突破 100 万!

阅读更多
Gradio logo
  1. 构建界面
  2. 界面状态

界面状态

到目前为止,我们假设你的演示是无状态的:它们不会在单个函数调用之外持久保存信息。 如果你想根据之前与演示的交互来修改演示的行为怎么办?Gradio 中有两种方法:全局状态会话状态

全局状态

如果状态是所有函数调用和所有用户都应该访问的东西,你可以在函数调用之外创建一个变量,并在函数内部访问它。 例如,你可以在函数外部加载一个大型模型,并在函数内部使用它,这样每个函数调用都不需要重新加载模型。

import gradio as gr

scores = []

def track_score(score):
    scores.append(score)
    top_scores = sorted(scores, reverse=True)[:3]
    return top_scores

demo = gr.Interface(
    track_score,
    gr.Number(label="Score"),
    gr.JSON(label="Top Scores")
)
demo.launch()

在上面的代码中,scores 数组在所有用户之间共享。 如果多个用户正在访问此演示,他们的分数都将被添加到同一个列表中,并且返回的前 3 个分数将从这个共享引用中收集。

会话状态

Gradio 支持的另一种数据持久化类型是会话状态,其中数据在页面会话中的多次提交之间持续存在。 但是,数据在模型的不同用户之间共享。 要将会话状态中的数据存储,你需要做三件事:

  1. 在你的函数中传入一个额外的参数,该参数表示界面的状态。
  2. 在函数结束时,返回状态的更新值作为额外的返回值。
  3. 在创建 Interface 时,添加 'state' 输入和 'state' 输出组件

这是一个简单的应用程序来说明会话状态 - 此应用程序只是存储用户之前的提交并将其显示回给用户

import gradio as gr

def store_message(message: str, history: list[str]):  
    output = {
        "Current messages": message,
        "Previous messages": history[::-1]
    }
    history.append(message)
    return output, history

demo = gr.Interface(fn=store_message,
                    inputs=["textbox", gr.State(value=[])],
                    outputs=["json", gr.State()])

demo.launch()

请注意,状态如何在每个页面内的提交之间持续存在,但是如果你在另一个选项卡中加载此演示(或刷新页面),则演示将不会共享聊天历史记录。 在这里,我们无法将提交历史记录存储在全局变量中,否则提交历史记录将在不同用户之间混淆。

State 的初始值默认为 None。 如果你将参数传递给 gr.State()value 参数,它将用作状态的默认值。

注意:Interface 类仅支持单个会话状态变量(尽管它可以是包含多个元素的列表)。 对于更复杂的用例,你可以使用 Blocks,它支持多个 State 变量。 或者,如果你正在构建一个维护用户状态的聊天机器人,请考虑使用 ChatInterface 抽象,它可以自动管理状态