メインコンテンツへスキップ
見出し画像
Photo bynanadays

【Lambda】 Puppeteer のbrowser.close() には注意せよ

    こんにちは、スーパーソフトウェア東京オフィス技術部の金子です。
    ブラウザ操作ライブラリの Puppeteer を使用している Lambda関数 で Task Timeout と ENOSPC エラーが頻発する事象がありましたので、解消方法を共有します。

    ウォームスタートは同じ環境を利用する

    Lambda は 一定時間内に頻繁に呼び出されると、同じ実行環境を再利用 します。
    これにより ライブラリの再読み込みが不要 となり、関数の 実行時間が短縮 されます。

    一方で、環境を再利用するため キャッシュや一時ファイルが蓄積 し、ディスクスペースを圧迫する可能性があります。
    また、グローバル変数も引き継がれるため、変数が意図しない値を保持しないか などの注意が必要です。

    Puppeteer の browser.close() の注意点

    Puppeteer はブラウザのキャッシュを Lambda の /tmp ディレクトリ に保存します。通常、browser.close() の呼び出しでキャッシュは削除されますが、browser.close() がスタック すると Task Timeout エラー が発生し、キャッシュが残ったままになります。

    その状態で Lambda がウォームスタート すると、前回のキャッシュが蓄積 され、ディスク消費量が増加。結果として ENOSPC(ディスク容量不足)エラー が発生し、以降のウォームスタートでエラーが続くようになります。

    解消方法

    • browser で何らかの処理中にエラーが発生すると、browser.close() が呼び出されずに終了してしまい、キャッシュが残る可能性があります。そのため、browser.close() を finally ブロックで確実に実行 するようにします。

    • また、browser.close() がスタックする問題を防ぐため、事前にページを閉じて接続を解除 します。複数のページを開いている場合は、for 文などで すべてのページを閉じる ようにしましょう。

    • さらに、browser.close() 実行後もプロセスが残る ことがあるため、プロセスを手動で強制終了 します。

    実装例(TypeScript)

    ...
    const browser = await puppeteer.launch();
    const page = await browser.newPage();
    
    try {
        await page.goto(url);
    } finally {
        await closeBrowser(page, browser);
        console.log('Browser closed successfully.');
    }
    ...
    
    const closeBrowser = async (
        page: puppeteer.Page,
        browser: puppeteer.Browser
    ): Promise<void> => {
        await page.close(); // ページを閉じる
        await browser.disconnect(); // 接続を解除
        await browser.close(); // ブラウザを閉じる
        browser.process()?.kill(9); // プロセスを強制終了
    };

    ▼採用情報

    ▼新卒情報はWantedlyで

     
     
    スーパーソフトウエア東京オフィスのエンジニアが発信する技術ブログです。 スーパーソフトウエアは「テクノロジーで世界を革新する」というミッションのもと、40年に渡りIT技術を追求しているプロ技術者集団です。

    あなたへのおすすめ