初识TDMQ

目录

一:需求背景

  • 目前公司需要将决策引擎处理的结果, 一部分数据交给下游分析/入黑/通知等功能。因此就需要决策引擎生产结果让多方下游去消费。 而我需要实现下游的一部分功能。

二:相关文档

三:验证TDMQ广播消息

  • 将TDMQ使用配置写入到一个配置文件中: config.py

    python 复制代码
    topic = ''
    tdmq_url = ''
    tdmq_secret_key = ''
  • 编写生产者发送消息:

    python 复制代码
    #!/usr/bin/env python
    # -*- coding: utf-8 -*-
    # @Time   : 2023/7/24 16:28
    # 模拟TDMQ生产者发送消息
    import json
    
    import pulsar
    
    from conf.config import tdmq_secret_key, tdmq_url, topic
    
    
    def produser_send_msg():
        """生产者发送消息"""
        tdmq_client = pulsar.Client(
            authentication=pulsar.AuthenticationToken(tdmq_secret_key),
            service_url=tdmq_url
        )
        producer = tdmq_client.create_producer(
            topic=topic
        )
        send_data = json.dumps({"uniq_id": "1234567890", "project_id": 2})
        producer.send(
            send_data.encode('utf-8'),
            properties={},
            partition_key=''
        )
    
    
    if __name__ == '__main__':
        produser_send_msg()
  • 编写两个消费者, 消费消息(第二个只需要将subscription_name改为sub_topic2)

    python 复制代码
    #!/usr/bin/env python
    # -*- coding: utf-8 -*-
    # @Time   : 2023/7/24 18:55
    # @Author : shanwen.ren
    import pulsar
    
    from conf.config import tdmq_secret_key, tdmq_url, post_fund_topic
    
    tdmq_client = pulsar.Client(
            authentication=pulsar.AuthenticationToken(tdmq_secret_key),
            service_url=tdmq_url
        )
    
    consumer = tdmq_client.subscribe(
        # topic完整路径,格式为persistent://集群(租户)ID/命名空间/Topic名称,从【Topic管理】处复制
        topic=topic,
        # 订阅名称
        subscription_name='sub_topic1'
    )
    
    
    def produser_send_msg():
        """消费者消费消息"""
        # 获取消息
        msg = consumer.receive()
        try:
            # 模拟业务
            print("Received message '{}' id='{}'".format(msg.data(), msg.message_id()))
            # 消费成功,回复ack
            consumer.acknowledge(msg)
        except:
            # 消费失败,消息将会重新投递
            consumer.negative_acknowledge(msg)
    
    
    if __name__ == '__main__':
        while True:
            produser_send_msg()
  • 开启两个消费者进程。

  • 启动生产者发送消息


相关推荐
HoweChenya1 分钟前
Gemma-4 实测:31B Dense 与 26B MoE 在 H20 上的性能分水岭
开发语言·php
qq_372906934 分钟前
lang属性怎么设语言_HTML文档语言声明方法【操作】
jvm·数据库·python
Wyz201210245 分钟前
C#怎么创建控制台应用 C#如何编写Console控制台程序处理命令行参数和输入输出【入门】
jvm·数据库·python
财经资讯数据_灵砚智能6 分钟前
基于全球经济类多源新闻的NLP情感分析与数据可视化(日间)2026年4月20日
大数据·人工智能·python·信息可视化·自然语言处理
2501_914245937 分钟前
CSS如何提升CSS预处理器的编译效率_利用BEM结构优化选择器匹配
jvm·数据库·python
Je1lyfish8 分钟前
Haskell 初探
开发语言·笔记·算法·rust·lisp·抽象代数
不瘦80斤不改名9 分钟前
深入理解 FastAPI 核心架构:依赖注入、分页机制与数据流转的底层逻辑
python·架构·fastapi
景庆1979 分钟前
vscode启动springBoot项目配置,激活环境
java·开发语言·vscode
qq_3300379910 分钟前
C#怎么解析XML文件 C#如何用XmlDocument和LINQ to XML读写XML数据【基础】
jvm·数据库·python
幽络源小助理11 分钟前
PHP网站统计系统源码下载_极简统计程序支持宝塔部署_幽络源
开发语言·php