如何使用PHP的swoole扩展提高服务器并发能力

亿牛云代理

PHP的swoole扩展是一个高性能的网络通信框架,它可以让PHP开发者轻松地创建TCP/HTTP服务,来响应客户端的请求。但是,有些请求可能涉及到一些复杂和耗时的业务逻辑,如果在工作进程中直接处理,可能会影响服务器的并发能力。为了解决这个问题,swoole提供了两种异步执行任务的模型:task模型和多进程模型。

task模型是指在工作进程中,通过调用swoole_server->task()方法,将任务投递给task进程处理。task进程是一种特殊的工作进程,专门用于处理耗时的任务。task进程可以通过设置task_worker_num参数来指定数量。当task进程处理完任务后,可以通过调用swoole_server->finish()方法,将结果返回给工作进程。

多进程模型是指在工作进程中,通过调用swoole_process类,创建子进程来处理任务。子进程是独立的进程,可以使用swoole提供的同步和锁机制来保证数据访问的安全性。子进程可以通过设置process_num参数来指定数量。当子进程处理完任务后,可以通过调用swoole_process->write()方法,将结果写入管道中。

无论是使用task模型还是多进程模型,都可以提高服务器的并发处理能力,适合处理一些比较复杂和耗时的业务逻辑。swoole扩展为PHP开发者提供了一个强大而灵活的网络编程工具,让PHP不仅仅是一个Web开发语言。

<?php

// 引入swoole扩展

use Swoole\Http\Server;

use Swoole\Http\Request;

use Swoole\Http\Response;

// 创建一个TCP/HTTP服务

$server = new Server("0.0.0.0", 9523);

// 设置工作进程和任务进程的数量

$server->set([

    'worker_num' => 4,

    'task_worker_num' => 2

]);

// 注册请求处理回调函数

$server->on("request", function (Request $request, Response $response) use ($server) {

    // 获取客户端传递的数据

    $data = $request->get;

    // 判断是否使用task模型或多进程模型

    if (isset($data['mode']) && $data['mode'] == 'task') {

        // 使用task模型,投递任务给task进程处理

        $server->task($data);

        // 返回响应给客户端,不关注任务执行结果

        $response->end("Task mode: task has been delivered.");

    } else {

        // 使用多进程模型,创建子进程处理任务

        $process = new Swoole\Process(function ($process) use ($data) {

            // 在子进程中处理任务逻辑,比如写入数据库等

            // 这里只是简单地打印数据

            echo "Process mode: data is " . json_encode($data) . "\n";

            // 处理完任务后,将结果写入管道中

            $process->write("Process mode: task has been done.");

        });

        // 启动子进程

        $process->start();

        // 从管道中读取子进程返回的结果

        $result = $process->read();

        // 返回响应给客户端,包含任务执行结果

        $response->end($result);

    }

});

// 注册任务处理回调函数

$server->on("task", function ($server, $task_id, $src_worker_id, $data) {

    // 在task进程中处理任务逻辑,比如写入数据库等

    // 这里只是简单地打印数据

    echo "Task mode: data is " . json_encode($data) . "\n";

    // 增加一个使用代理IP采集百度关键词的任务逻辑

    // 设置爬虫加强版代理IP

    $proxy = "http://www.16yun.cn:8080";

    $userpwd =“16YUN:16IP”;

    // 设置curl选项,使用代理IP和User-Agent

    $ch = curl_init();

    curl_setopt($ch, CURLOPT_URL, "https://www.baidu.com/s?wd=" . urlencode($data["keyword"])); // 拼接百度搜索URL,使用$data["keyword"]作为关键词

    curl_setopt($ch, CURLOPT_PROXY, $proxy); // 使用爬虫加强版代理IP

    curl_setopt($ch, CURLOPT_USERPWD, $userpwd); // 设置用户名和密码

    curl_setopt($ch, CURLOPT_USERAGENT, "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.110 Safari/537.36"); // 使用随机或固定的User-Agent

    curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); // 将结果返回为字符串,而不是输出到屏幕上

    curl_setopt($ch, CURLOPT_TIMEOUT, 10); // 设置超时时间为10秒

    // 使用 -u 参数指定用户名和密码,假设用户名是 foo,密码是 bar

    curl_setopt($ch, CURLOPT_USERPWD, "foo:bar"); // 或者使用 --netrc-file 参数指定一个包含用户名和密码的文件,假设文件名是 my-password-file

    // curl_setopt($ch, CURLOPT_NETRC_FILE, "my-password-file");

    // 执行curl请求,获取百度搜索结果页面的HTML内容

    $html = curl_exec($ch);

    curl_close($ch);

    // 解析HTML内容,提取搜索结果的标题和链接等信息,可以使用正则表达式或第三方库等方法

    // 这里只是简单地打印HTML内容的前100个字符

    echo "Task mode: HTML content is " . substr($html, 0, 100) . "\n";

    // 处理完任务后,将结果返回给工作进程,可以省略

    return "Task mode: task has been done.";

});

// 注册任务完成回调函数

$server->on("finish", function ($server, $task_id, $data) {

    // 在工作进程中接收任务执行结果,可以省略

    echo "Task mode: result is " . $data . "\n";

});

// 启动服务

$server->start();

上述代码使用PHP的swoole扩展创建了一个TCP/HTTP服务,监听了9523端口,可以接收客户端的请求,并根据请求参数,使用task模型或多进程模型来异步执行爬虫采集百度搜索的任务,可以根据业务需要通过拓展实现更多个并发功能。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,293评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,604评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,958评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,729评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,719评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,630评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,000评论 3 397
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,665评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,909评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,646评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,726评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,400评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,986评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,959评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,197评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,996评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,481评论 2 342

推荐阅读更多精彩内容