【PHP8.x】curl_multi_exec関数の使い方

Copy
1<?php
2
3/**
4 * 複数のURLに並行してHTTPリクエストを送信し、その内容を取得します。
5 * システムエンジニアを目指す初心者でも理解しやすいように、基本的なCURLマルチハンドルの利用方法を示します。
6 *
7 * @param array<string, string> $urls キーを識別子、値をURLとする連想配列。
8 * @return array<string, string> キーを識別子、値をURLから取得したコンテンツ（またはエラーメッセージ）とする連想配列。
9 * @throws RuntimeException CURLマルチハンドルの初期化に失敗した場合にスローされます。
10 */
11function fetchUrlsConcurrently(array $urls): array
12{
13    // 1. CURLマルチハンドルを初期化します。
14    // これにより、複数のCURLリクエストを同時に管理できるようになります。
15    $multi_handle = curl_multi_init();
16    if ($multi_handle === false) {
17        throw new RuntimeException("CURLマルチハンドルの初期化に失敗しました。");
18    }
19
20    $handles = []; // 個々のCURLハンドルを格納する配列
21    $results = []; // 最終的な取得結果を格納する配列
22
23    // 2. 各URLに対して個別のCURLハンドルを作成し、マルチハンドルに追加します。
24    foreach ($urls as $key => $url) {
25        $ch = curl_init();
26        if ($ch === false) {
27            // 個々のCURLハンドル作成に失敗した場合、エラーログを記録し、このURLはスキップします。
28            error_log("CURLハンドル作成に失敗: " . $url);
29            continue;
30        }
31
32        // CURLオプションを設定します。
33        curl_setopt($ch, CURLOPT_URL, $url);             // リクエスト先のURLを設定
34        curl_setopt($ch, CURLOPT_HEADER, 0);             // レスポンスヘッダーを結果に含めない
35        curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);  // レスポンスボディを文字列として返す
36
37        // 個々のCURLハンドルをマルチハンドルに追加します。
38        curl_multi_add_handle($multi_handle, $ch);
39        $handles[$key] = $ch; // 後で結果を取得するために、識別子とともにハンドルを保存します。
40    }
41
42    // 3. すべてのリクエストが完了するまで、CURLマルチハンドルを実行します。
43    $still_running = null; // まだ実行中のCURLハンドルの数を格納します。
44    do {
45        // curl_multi_exec() を呼び出し、リクエストの実行状況を進めます。
46        // $still_running は参照渡しで、実行中のハンドル数が更新されます。
47        $status = curl_multi_exec($multi_handle, $still_running);
48
49        if ($still_running > 0) {
50            // まだ実行中のリクエストがある場合、CPUの使用率を抑えるためにイベントを待機します。
51            // 0.1秒 (100ミリ秒) 待機するか、ソケットの活動があるまで待機します。
52            curl_multi_select($multi_handle, 0.1);
53        }
54    } while ($still_running > 0 && $status === CURLM_OK); // 実行中のハンドルがあり、エラーがない間ループを続けます。
55
56    // 4. 全てのリクエストが完了したら、結果を取得し、ハンドルをクローズします。
57    foreach ($handles as $key => $ch) {
58        $error = curl_error($ch); // エラーメッセージを取得
59        $errno = curl_errno($ch); // エラー番号を取得
60
61        if ($errno === 0) {
62            // エラーがない場合、リクエストのコンテンツを取得します。
63            $results[$key] = curl_multi_getcontent($ch);
64        } else {
65            // エラーが発生した場合、エラーメッセージを結果に格納します。
66            $results[$key] = "エラー ($errno): " . $error;
67        }
68
69        // マルチハンドルから個々のCURLハンドルを削除します。
70        curl_multi_remove_handle($multi_handle, $ch);
71        // 個々のCURLハンドルをクローズし、リソースを解放します。
72        curl_close($ch);
73    }
74
75    // マルチCURLハンドルをクローズし、関連するリソースを解放します。
76    curl_multi_close($multi_handle);
77
78    return $results;
79}
80
81// --- 使用例 ---
82$urls_to_fetch = [
83    'google' => 'https://www.google.com/',
84    'github' => 'https://github.com/',
85    'example_com' => 'https://example.com/',
86    'invalid_url' => 'http://this-url-does-not-exist-12345.com/', // エラーテスト用
87];
88
89echo "複数のURLからコンテンツを並行して取得中...\n";
90
91try {
92    $fetched_contents = fetchUrlsConcurrently($urls_to_fetch);
93
94    // 取得したコンテンツまたはエラーメッセージを表示します。
95    foreach ($fetched_contents as $name => $content) {
96        echo "\n--- " . $name . " ---\n";
97        if (str_starts_with($content, "エラー")) {
98            echo $content . "\n"; // エラーメッセージを表示
99        } else {
100            // 取得したコンテンツの最初の200文字を表示します。
101            echo substr($content, 0, 200) . "...\n";
102        }
103    }
104} catch (RuntimeException $e) {
105    echo "エラー: " . $e->getMessage() . "\n";
106}
107
108?>

PHPのcurl_multi_exec関数は、複数のHTTPリクエストを並行して実行し、その進行を管理する際に使用されます。これにより、複数のウェブサイトからコンテンツを効率的に同時に取得するなどの処理が可能になります。

この関数の最初の引数$multi_handleは、curl_multi_initで初期化されたCurlMultiHandle型のリソースで、実行する複数のCURLリクエストをまとめた集合体です。二番目の引数&$still_runningは参照渡しで、関数が呼び出されるたびに、まだ実行中（処理が完了していない）のCURLハンドルの数がこの変数に整数値として更新されます。戻り値は整数型で、通常はCURLM_OKなどのマルチCURLハンドルの現在の実行ステータスを示します。

サンプルコードでは、fetchUrlsConcurrently関数内でcurl_multi_initで初期化したマルチハンドルに、curl_multi_add_handleを使って個々のCURLリクエストを追加しています。その後、do-whileループの中でcurl_multi_exec($multi_handle, $still_running)を繰り返し呼び出し、追加された複数のリクエストをバックグラウンドで並行処理します。$still_runningが0になるまでループを続けることで、すべてのリクエストの完了を待ちます。ループ内では、curl_multi_selectを挟むことで、CPU使用率を抑えつつ効率的にイベントを待機します。すべてのリクエストが完了したら、curl_multi_getcontentでそれぞれの結果を取得し、curl_multi_remove_handleやcurl_closeで関連するリソースを解放しています。このように、curl_multi_execはCURLによる並行処理を実現するための中心的な役割を担います。