多个定时脚本同一时间执行时,clickhouse爆内存异常

ae7c54573860b201fb38353548b2f5b.png

解决方式:利用redis进行加锁,同一时间内,只能先执行一个脚本

<?php

$redis = new Redis();
$redis->connect('127.0.0.1', 6379);

$lockKey = 'my_lock_key';
$timeout = 10; // 锁超时时间

// 加锁
function acquireLock($redis, $lockKey, $timeout) {
    $identifier = uniqid(); // 生成唯一标识符
    $end = time() + $timeout;
    while (time() < $end) {
        if ($redis->set($lockKey, $identifier, ['NX', 'EX' => $timeout])) {
            return $identifier;
        } else if ($redis->ttl($lockKey) == -1) {
            // 防止锁没有正常释放而导致的死锁情况
            $redis->expire($lockKey, $timeout);
        }
        usleep(100000); // 等待100毫秒
    }
    return false;
}

// 释放锁
function releaseLock($redis, $lockKey, $identifier) {
    $script = "
        if redis.call('get', KEYS[1]) == ARGV[1] then
            return redis.call('del', KEYS[1])
        else
            return 0
        end
    ";
    $redis->eval($script, [$lockKey, $identifier], 1);
}

// 使用示例
$identifier = acquireLock($redis, $lockKey, $timeout);
if ($identifier) {
    try {
        // 在这里执行需要加锁的操作
        echo "成功获取锁,进行任务处理\n";
        sleep(5);
    } finally {
        releaseLock($redis, $lockKey, $identifier);
        echo "释放锁\n";
    }
} else {
    echo "未能获取锁,任务正在执行中\n";
}

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 你认为在同一时间内,人即可以同时是坏人和好人吗?看起来很复杂,要知道的是古代西方是没有中国的“中庸思想”的,他们认...
    沙漠阅读 487评论 0 26
  • 锁是一个面试的热门话题,有乐观锁、悲观锁、重入锁、公平锁、分布式锁。有很多和锁相关的数据结构,比如说阻塞队列。还有...
    金融测试民工阅读 898评论 0 1
  • 有朋友经常和我诉说,天天有做不完的事,以至于每天觉得身心俱疲,什么事情都想做,有什么事情都做不好。 我说你是不是同...
    与我彤行阅读 707评论 0 8
  • 01 Redis到底是单线程还是多线程 Redis 6.0 版本之前的单线程指的是其网络I/O和键值对读写是由一个...
    可怜的橡树阅读 195评论 0 0
  • 1. redis介绍 Redis 是一种基于内存的数据库,对数据的读写操作都是在内存中完成,因此读写速度非常快,常...
    小pig阅读 399评论 0 0