侯体宗的博客
  • 首页
  • Hyperf版
  • beego仿版
  • 人生(杂谈)
  • 技术
  • 关于我
  • 更多分类
    • 文件下载
    • 文字修仙
    • 群聊
    • 九宫格抽奖
    • 拼图
    • 消消乐
    • 相册

Laravel的数据库作业链扩展包:laravel-haystack

Laravel  /  管理员 发布于 8个月前   185

Laravel Haystack 是一个允许你在数据库中存储作业链的包。

由于链中的所有作业都在数据库中,内存使用率很低,您可以长时间延迟作业或长时间运行作业,而不会冒险使用所有内存。

Laravel Haystack 开箱即用地支持每个队列连接/工作者。(数据库、Redis/Horizon、SQS)。

$haystack = Haystack::build()
   ->withName('Podcast Chain')
   ->addJob(new RecordPodcast)
   ->addJob(new ProcessPodcast)
   ->addJob(new PublishPodcast)
   ->then(function () {
      // Haystack完成
   })
   ->catch(function () {
      // Haystack失败
   })
   ->finally(function () {
      // 总是在成功或失败时运行.
   })
   ->paused(function () {
      // 如果 haystack 暂停则运行
   })
   ->withMiddleware([
      // 适用于每项工作的中间件
   ])
   ->withDelay(60) // 为每个作业添加延迟
   ->dispatch();

但是Laravel不是已经有工作链了吗?

让我们明确一点,我们不是在谈论批处理作业。

Laravel 确实有工作链,但他们有一些考虑。

1.由于链存储在作业中,因此它们消耗了大量的内存/数据。如果您要存储数千个作业,则尤其如此。
2.它们是易变的,这意味着如果你失去了链条中的一份工作——你就会失去整个链条。
3.它们不提供批处理作业所提供的then, catch,finally可调用方法。
4.基于内存或 SQS 队列的长时间延迟是不可能的,因为您可能会由于过期或服务器关闭而丢失作业。
5.您无法在作业之间共享数据,因为整个链中没有“状态”


Laravel Haystack 旨在通过将作业链存储在数据库中并一次排队一个作业来解决这个问题。

当作业完成时,Laravel Haystack 会监听“作业完成”事件,并将链中的下一个作业从数据库中排队。


使用Laravel Haystack这个包,您可以将作业链存储在数据库中,这有助于降低内存消耗并支持所有 Laravel 开箱即用的队列类型。

其他一些主要功能包括:

1.低内存消耗,因为一次处理一个作业,链存储在数据库中
2.您可以根据需要延迟/释放作业,因为它将使用调度程序重新启动链。即使您的队列驱动程序是 SQS!
3.它提供回调方法,如then,catch和finally
4.可应用于链中每个作业的全局中间件
5.可以添加到链中每个作业的延迟
6.您可以存储和检索链中每个作业都可以访问的数据/状态。
7.您可以存储模型以供以后处理。
8.你可以做一些很酷的事情,例如如果你的工作链调用 API 并达到速率限制,则暂停 haystacks。虽然 Laravel 有作业链,但我认为您应该考虑将这个包用于批处理作业。查看自述文件,了
9.解此软件包与内置链功能的区别的完整详细信息。


Laravel Haystack场景用例

1.如果您需要连续进行数百或数千次API调用,可以结合Spatie的Job Rate Limiter来跟踪延迟并在达到速率限制时暂停作业。
2.如果您需要一次将数千个作业排成队列。
3.如果您需要批量导入数据行 - 每一行都可以是一个干草堆作业(大包)并且一次处理一个。同时将重要的工作信息保存在数据库中。
4.如果您使用Amazon SQS时需要超过 15 分钟的“发布”时间


Laravel Haystack包支持的版本及安装配置

必需

Laravel 8+ 和 PHP 8.1

安装

您可以通过 composer 安装该软件包:

composer require sammyjo20/laravel-haystack

然后发布并运行迁移:

php artisan vendor:publish --tag="haystack-migrations"
php artisan migrate

您可以使用以下命令发布配置文件:

php artisan vendor:publish --tag="haystack-config"

...等等...

了解更多有关此软件包的更多信息,获取完整的安装说明,

并在GitHub上查看源代码。

git:

https://github.com/Sammyjo20/laravel-haystack

  • 上一条:
    centos7 + supervisor实现laravel队列常驻进程流程步骤
    下一条:
    在Laravel应用程序中加密和解密Eloquent模型字段扩展包:Laravel Ciphersweet
  • 昵称:

    邮箱:

    0条评论 (评论内容有缓存机制,请悉知!)
    最新最热
    • 分类目录
    • 人生(杂谈)
    • 技术
    • linux
    • Java
    • php
    • 框架(架构)
    • 前端
    • ThinkPHP
    • 数据库
    • 微信(小程序)
    • Laravel
    • Redis
    • Docker
    • Go
    • swoole
    • Windows
    • Python
    • 苹果(mac/ios)
    • 相关文章
    • 在laravel中介绍一个生成假数据的PHP库:FakerPHP(0个评论)
    • 在laravel框架中对环境配置文件的加载过程步骤浅析(0个评论)
    • Laravel 10.12版本发布(0个评论)
    • 在laravel中以curl的方式请求京东联盟api获取数据流程步骤(0个评论)
    • 在Laravel中使用PHP内置服务器:PHP -S命令(0个评论)
    • 近期文章
    • 在go语言中以邮件标题中获取SPF和DMARC,来判断是否为垃圾邮件之垃圾邮件过滤器功能实现(0个评论)
    • 在go语言中使用attr字段标签提取XML属性数据示例(0个评论)
    • 在laravel中介绍一个生成假数据的PHP库:FakerPHP(0个评论)
    • 在laravel框架中对环境配置文件的加载过程步骤浅析(0个评论)
    • Laravel 10.12版本发布(0个评论)
    • 在go语言中如何记录每个HTTP请求到你的Web服务器、日志记录器?(0个评论)
    • 在Go语言中如何查找一个IP地址的网络地址?(0个评论)
    • ELK + Filebeat 搭建日志系统流程步骤(0个评论)
    • 在laravel中以curl的方式请求京东联盟api获取数据流程步骤(0个评论)
    • 在go语言中使用gin框架-中间件gin.BasicAuth()实现账号密码方式认证示例(0个评论)
    • 近期评论
    • 博主 在

      2023年国务院办公厅春节放假通知:1月21日起休7天中评论 @ xiaoB 你只管努力,剩下的叫给天意;天若有情天亦老,..
    • xiaoB 在

      2023年国务院办公厅春节放假通知:1月21日起休7天中评论 会不会春节放假后又阳一次?..
    • BUG4 在

      你翻墙过吗?国内使用vpn翻墙可能会被网警抓,你需了解的事中评论 不是吧?..
    • 博主 在

      go语言+beego框架中获取get,post请求的所有参数中评论 @ t1  直接在router.go文件中配就ok..
    • Jade 在

      如何在MySQL查询中获得当月记录中评论 Dear zongscan.com team, We can skyroc..
    • 2016-10
    • 2016-11
    • 2017-07
    • 2017-08
    • 2020-03
    • 2020-04
    • 2020-05
    • 2020-06
    • 2020-07
    • 2020-08
    • 2020-09
    • 2020-10
    • 2020-11
    • 2021-01
    • 2021-02
    • 2021-03
    • 2021-04
    • 2021-05
    • 2021-06
    • 2021-07
    • 2021-08
    • 2021-09
    • 2021-10
    • 2021-11
    • 2021-12
    • 2022-01
    • 2022-02
    • 2022-03
    • 2022-04
    • 2022-05
    • 2022-06
    • 2022-07
    • 2022-08
    • 2022-09
    • 2022-10
    • 2022-11
    • 2022-12
    • 2023-01
    • 2023-02
    • 2023-03
    • 2023-04
    • 2023-05
    Top

    Copyright·© 2019 侯体宗版权所有· 粤ICP备20027696号 PHP交流群

    侯体宗的博客