Laravel使用Kafka实践教程(从安装到使用0-1)

一、Linux安装Kafka

首先Linux服务器需要安装好Kafka,这里不再具体细说,可以看我前面的文章:Linux搭建Kafka详细一步一步指南(linux启动kafka脚本)-CSDN博客

二、Laravel安装Kafka

复制代码
composer require enqueue/rdkafka:0.10.18

注意:版本号一定要选对!!!至于版本号该怎么选择,这里也不再细说,可以看我前面的文章:Laravel 使用rdkafka_laravel详细教程(实操避坑)_laravel kafka-CSDN博客

三、安装 rdkafka 扩展

根据你的操作系统和 PHP 版本,安装 rdkafka 扩展。你可以参考 rdkafka 扩展的官方文档来完成安装

可参考文章里面【windows】PHP扩展 安装教程,Linux也差不多,下载对应linux的就可以:Laravel 使用rdkafka_laravel详细教程(实操避坑)_laravel kafka-CSDN博客

四、配置 Laravel Enqueue

打开 config/queue.php 文件,找到 connections 数组,并添加以下配置:

php 复制代码
'connections' => [
     //kafka消息队列
     'rdkafka' => [
            'driver' => 'rdkafka',
            'brokers' => env('KAFKA_BROKERS', 'localhost'),
            'topic' => env('KAFKA_TOPIC', 'default_topic'),
            'group_id' => env('KAFKA_GROUP_ID', 'default_group'),
            'security_protocol' => 'plaintext', // 可选配置,根据实际情况设置,安全协议,用于与 Kafka 代理进行通信的协议,plaintext,表示明文通信,可以根据实际情况设置其他支持的安全协议,例如 ssl 或 sasl_ssl
            'sasl_mechanisms' => null, // 可选配置,根据实际情况设置
            'sasl_username' => null, // 可选配置,根据实际情况设置
            'sasl_password' => null, // 可选配置,根据实际情况设置
            'commit_async' => true, // 可选配置,根据实际情况设置
        ],
],

五、创建Job

php 复制代码
<?php

namespace App\Jobs;

use Enqueue\RdKafka\RdKafkaContext;
use Illuminate\Contracts\Queue\ShouldQueue;
use Illuminate\Foundation\Bus\Dispatchable;
use Illuminate\Queue\InteractsWithQueue;
use Illuminate\Queue\SerializesModels;
use Illuminate\Support\Facades\Log;

class KafkaMessage implements ShouldQueue
{
    use Dispatchable, InteractsWithQueue, SerializesModels;

    protected $message;

    /**
     * Create a new job instance.
     *
     * @param  string  $message
     * @return void
     */
    public function __construct(string $message)
    {
        $this->message = $message;
    }

    /**
     * Execute the job.
     *
     * @return void
     */
    public function handle()
    {
        Log::info('Received Kafka message: ' . $this->message);
    }
}

六、将消息推送到 Kafka 队列

以下是一个示例,演示如何将消息推送到 Kafka 队列:

php 复制代码
<?php

namespace App\Http\Controllers;

use App\Jobs\ProcessKafkaMessage;
use Illuminate\Http\Request;

class KafkaController extends Controller
{
    public function sendMessage(Request $request)
    {
        $message = $request->input('message');

        KafkaMessage::dispatch($message)
            ->onQueue('kafka')
            ->delay(now()->addSeconds(5));

        return response()->json(['message' => 'Message sent to Kafka']);
    }
}

在这个示例中,将接收到的消息作为参数传递给 KafkaMessage 作业,并将作业推送到名为 "kafka" 的队列上,并设置了延迟时间为 5 秒。

当消息被推送到 Kafka 队列后,作业将自动从队列中获取并执行。在示例中,作业会将接收到的消息记录到日志文件中。

这是一个简单的示例,以演示在 Laravel 中使用 Kafka 消息队列。你可以根据自己的需求进行修改和扩展。记得在使用 Kafka 之前,确保已经设置好正确的 Kafka 连接和主题配置。

七、监听队列消费消息

在 Laravel 中,你可以使用 queue:work Artisan 命令来监听 Kafka 消息队列并处理消息。以下是监听 Kafka 消息队列的步骤:

打开终端,并在项目根目录下执行以下命令来启动 Kafka 消息队列监听器:

bash 复制代码
php artisan queue:work kafka --queue=kafka

这里建议使用Superviso进程管理消息队列监听,可以看我这篇文章,有详细说明:Laravel 队列监听Superviso进程管理(消息队列后台监听)-CSDN博客

希望我的文章能帮助你~ 共同进步~

相关推荐
下页、再停留5 小时前
【ThinkPHP6系列学习-5】获取变量
php
kaikaile199511 小时前
PHP计算过去一定时间段内日期范围函数
android·开发语言·php
shinelord明14 小时前
【大数据开发实践】Kafka REST Proxy~无缝集成 Kafka
大数据·分布式·架构·kafka
zhangfeng113314 小时前
fastadmin 关闭日志 /runtime/log 这里的日志 关闭
php
19岁开始学习15 小时前
PHP操作elasticsearch7.8
elasticsearch·jenkins·php
Yyyy48215 小时前
Ansible Role修改IP地址与主机名
linux·服务器·php
JaguarJack15 小时前
多进程环境中解决 PHP 文件系统锁定问题指南
后端·php
老葱头蒸鸡1 天前
(2)Kafka架构原理与存储机制
分布式·架构·kafka
stwood0071 天前
codeigniter换服务器之后,会员登录之后又跳回登录页面的解决方法
服务器·php
vxtkjzxt8881 天前
自动化脚本矩阵运营
开发语言·php