c# Orleans 的 Stream 和 Observer 并发模型

老辰小哥_2025

老辰小哥_2025

2026-01-03

178人浏览

原创

IAsyncObserver.OnNextAsync 不会并发调用,因其由 StreamPullingAgent 单消费者拉取机制与 grain 单线程调度保证严格串行;需异步实现避免阻塞,否则导致流延迟堆积。

c# orleans 的 stream 和 observer 并发模型

Orleans 的 IAsyncStream 和 IAsyncObserver 不是线程安全的并发模型,而是单线程、顺序交付的虚拟流抽象——所有事件按发布顺序、在 grain 或 observer 所属的逻辑上下文中串行处理。

为什么 IAsyncObserver.OnNextAsync 不会并发调用

Orleans 流设计强制“每订阅一个 observer,其 OnNextAsync 调用严格串行化”,即使底层有多个 producer 并发推送,或多个 silo 同时投递消息。这是由 StreamPullingAgent 的单消费者拉取机制 + grain 激活上下文的单线程调度保证的。

  • 你无需加锁或手动同步 OnNextAsync 内部状态(比如累加计数器、更新缓存)
  • 但这也意味着:如果某个 OnNextAsync 执行耗时(如同步 DB 写入、阻塞 IO),整个流订阅将被阻塞,后续消息延迟堆积
  • 错误示例:
    public Task OnNextAsync(MyEvent e, StreamSequenceToken token = null)
    {
        // ❌ 危险:同步写数据库,阻塞流处理
        _dbContext.Events.Add(e);
        _dbContext.SaveChanges(); // 阻塞线程,拖慢整个订阅
        return Task.CompletedTask;
    }
  • 正确做法:始终用异步路径,让控制权及时交还调度器
    public async Task OnNextAsync(MyEvent e, StreamSequenceToken token = null)
    {
        // ✅ 推荐:异步持久化,不阻塞
        await _dbContext.Events.AddAsync(e);
        await _dbContext.SaveChangesAsync();
    }

GetStream 生成句柄是本地的,但流语义跨集群共享

调用 streamProvider.GetStream(streamId) 只是创建一个轻量级、无网络开销的逻辑句柄;真正的流生命周期、消息路由、订阅管理由 Orleans 运行时在集群中协调。这意味着:

deepstream-dev
deepstream-dev

使用 Python pyservicemaker API 进行 NVIDIA DeepStream SDK 开发。在构建视频分析流水线、基于 GStreamer

下载
  • streamId 必须全局唯一:靠 StreamId.Create("namespace", guid) 组合保证——guid 建议来自 grain ID(如 this.GetPrimaryKey()),namespace 区分业务域(如 "order-events" 或 "chat-messages")
  • 同一 streamId 在不同 silo 上调用 GetStream,拿到的是指向同一个逻辑流的句柄,不是各自独立的副本
  • Producer 和 Consumer 可以部署在完全不同的 silo 上,Orleans 自动完成消息投递和订阅发现(依赖配置的 pub/sub 存储,如 PubSubStore)
  • 常见坑:忘记在 silo 配置中启用流提供程序和 pub/sub 存储
    // SiloBuilder 必须包含这两行
    silo.AddMemoryStreams("SimpleStreamProvider")
        .AddMemoryGrainStorage("PubSubStore"); // 否则 SubscribeAsync 会静默失败或超时

背压不是自动的,得靠配置+代码配合

Orleans 默认不拒绝或缓冲过载消息;它依赖两种机制协同实现背压:LoadShedQueueFlowController(CPU 触发限流)和 BatchContainerBatchSize(控制每次拉取条数)。但它们都需显式开启。

  • 默认情况下,OnNextAsync 调用会排队等待执行,没有上限——内存可能被撑爆
  • 启用 CPU 背压:
    options.LoadSheddingEnabled = true;
    options.LoadSheddingLimit = 0.8; // CPU > 80% 时暂停接收新消息
  • 减小批处理大小降低内存压力(尤其对大消息流):
    services.Configure<streampullingagentoptions>(opts =>
    {
        opts.BatchContainerBatchSize = 1; // 默认是 1,设为 5 可提升吞吐但增加延迟
    });</streampullingagentoptions>
  • 真正关键的背压点在 consumer 端代码里:别让 OnNextAsync 成为瓶颈,该异步就异步,该降频就降频(比如用 RegisterTimer 批量消费)

最易被忽略的一点:流的“顺序性”只保证 per-subscription,不保证 per-producer 或全局全序。如果你从 3 个不同 grain 并发调用 stream.OnNextAsync,consumer 收到的顺序取决于网络延迟、silos 负载、pulling agent 调度时机——想强序,必须用同一个 grain 发送,或引入外部序列号+客户端排序逻辑。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

路由 stream c#

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

7167

5

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.10

2928

6

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

2023.08.10

4958

6

GoFrame框架零基础入门
GoFrame框架零基础入门

本专题整理GoFrame框架的入门知识,从模块化设计理念、环境准备到跑通第一个Web服务,讲清目录分层、配置加载、日志与中间件的用法,并对比Gin、Go-Zero的差异,帮助Go开发者建立整体认知。

2026.11.17

0

15

SQLAlchemy 一对多关系怎么建立
SQLAlchemy 一对多关系怎么建立

SQLAlchemy 一对多关系怎么建立?本专题整理父子表外键、relationship 双向映射、关联查询、级联删除和加载优化等相关文章,帮助你理解并实现常见的 ORM 关系建模。

2026.11.17

0

10

SQLAlchemy 如何增删改查
SQLAlchemy 如何增删改查

SQLAlchemy 如何增删改查?本专题整理 ORM 新增记录、条件查询、更新和删除、Session 事务提交与批量处理等实用文章,帮助你掌握 Python 数据库操作流程。

2026.11.17

0

11

SQLAlchemy ORM 模型怎么写
SQLAlchemy ORM 模型怎么写

SQLAlchemy ORM 模型怎么写?本专题整理模型类定义、Mapped 字段映射、主键与约束、表结构创建和常见报错的相关文章,帮助你从基础配置到实际建模逐步掌握 SQLAlchemy。

2026.11.17

0

16

Go-Zero API开发使用教程
Go-Zero API开发使用教程

本专题聚焦Go-Zero的API开发,拆解.api描述文件的语法结构、路由与分组定义、参数绑定与校验规则,说明统一响应体、JWT鉴权、跨域与接口文档生成的落地方式,并给出网关聚合与接口测试的实践建议。

2026.11.12

160

15

Go-Zero安装与goctl环境配置教程
Go-Zero安装与goctl环境配置教程

本专题围绕Go-Zero的安装与工具链配置展开,讲清Go版本要求、goctl安装方式、代理镜像、protoc依赖与环境变量设置,说明多版本共存、升级回退与CI流水线安装的做法,并整理安装阶段的常见报错与验证步骤。

2026.11.12

120

15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程