メインコンテンツへスキップ
見出し画像

第43回:【シリーズ】AI副業の情報収集を自動化したい⑥|n8n 2.xでニュースRSSを自動収集→ChatGPTで選別・要約→Slack設定まとめ

    最近、n8nを使って「ニュースサイトのRSSを定期チェックし、自分の好みに合う記事だけをChatGPTで選別してSlackに流す」仕組みを作っていた。

    やりたいこと自体はシンプルだが、実際に組んでみると意外と細かいところで苦労した。今回は、n8n 2.xで作ったこのフローの設定内容と、途中で引っかかったポイントをまとめる。同じように「情報収集を自動化したい」「AIでニュースを選んで通知したい」と考えている人の参考になればと思う。

    やりたかったこと

    やりたかったのは、1時間に1回、指定したニュースサイトのRSSを見に行き、新着記事の中から自分の関心に合うものだけをChatGPTで選び、必要なら日本語に翻訳し、3行くらいで要約してSlackに流す、という流れだ。

    通知先のSlackは通常のSlackノードではなく、Incoming Webhookを使う方式にした。このほうが設定もシンプルで、特定チャンネルへの通知だけであれば十分だ。

    最終的な流れはこうなった。

    1. Schedule Trigger
    2. RSS Read
    3. Limit
    4. Remove Duplicates
    5. OpenAI
    6. Code
    7. IF
    8. HTTP Request(Slack Webhook)

    一見複雑に見えるが、役割を分けるとわかりやすい。

    画像
    今回作成したワークフロー

    1. Schedule Triggerで1時間ごとに起動

    まず最初は Schedule Trigger を使う。ここで実行間隔を1時間に設定する。ニュース収集系は「新着を定期的に見に行く」形が基本なので、まずはこのノードがスタート地点になる。なお、n8nはスケジュールを変更したあと、ワークフローを再度有効化しないと反映されないことがあるので、その点は少し注意が必要だ。

    2. RSS Readでニュースサイトから情報を取得

    次に RSS Read で、指定したニュースサイトのRSSフィードを読み込む。
    このノードの役割はとてもシンプルで、RSS URLを指定すると、記事タイトルや本文の抜粋、リンク、公開日時などを取得してくれる。

    ここで重要なのは、サイトURLではなくRSS URLを入れることだ。このノードはシンプルだが、入力するURLが正確であることが前提になる。RSSが正しく取れれば、後続のノードに記事一覧を渡せる。

    3. Limitで件数を絞る

    RSSによっては一度にかなり多くの記事が返ってくる。そのまま全部をAIに渡すとコストも増えるし、後段の重複排除でも問題が出やすい。そこで Limit ノードを挟み、最新20件くらいに絞るようにした。ニュース通知なら、毎回何百件も処理する必要はほぼない。この1ステップを入れるだけでだいぶ軽快に動作するようになった。

    4. Remove Duplicatesで再通知を防ぐ

    RSS収集では同じ記事が何度も取れてしまうことがある。それを防ぐために Remove Duplicates を使った。設定は、過去実行との比較で link を基準に重複排除する形だ。ただ、ここでも少し詰まった。

    The number of items to be processed exceeds the maximum history size

    というエラーが出たことがある。これは、今流れてきた件数が History Size より多いと起きる。つまり、履歴保存数より多いitemを一度に渡してしまっていた。

    対策としては二つで、ひとつは History Size を増やすこと。もうひとつは、前段の Limit でそもそも件数を減らすことだ。今回の用途では後者の選択した。

    5. OpenAIで「選別+翻訳+3行要約」

    重複を除いたあとは、OpenAIノードに記事タイトルや説明文を渡して、好みに合うかどうかを判定させた。ここでは単に要約するのではなく、

    ・自分の関心に合うか
    ・英語なら日本語にする
    ・3行でまとめる

    という条件をまとめてプロンプトに入れた。返り値は、後ろで扱いやすいようにJSON形式にした。たとえばこんな形だ。

    {
      "pick": true,
      "reason": "選定理由を1文",
      "title_ja": "日本語タイトル",
      "summary_3lines": [
        "1行目",
        "2行目",
        "3行目"
      ],
      "link": "入力で渡された元記事URLをそのまま入れる"
    }

    この pick を後でIF分岐に使う。

    6. CodeノードでOpenAIの返答をJSON化

    ここが一番ハマった。見た目では "pick": true と返ってきていても、n8nの中ではそれが文字列として入っていることがある。そのまま IF で pick is true にしても、全部 false 側に流れてしまう。なぜだ…。

    原因は、OpenAIの返り値がトップレベルの pick ではなく、output[0].content[0].text のような場所に「JSON文字列」として入っていたことだった。そこで Codeノードで JSON.parse() して扱いやすい形に変換する。

    return items.map(item => {
      const data = JSON.parse(item.json.output[0].content[0].text);
    
      return {
        json: {
          ...item.json,
          ...data
        }
      };
    });

    ここで ...item.json を残すのが大事で、これをしないと元記事の link が消えてしまう。最初はここを落としていて、Slack通知に元記事へのリンクが入ってなかった。

    7. IFでpick=trueだけ通す

    JSON化したあとは、IF ノードで pick が true のものだけを通す。ここまで整形しておけば、ようやく {{$json.pick}} が使える。AIの返答をそのまま信じて分岐できる状態にするまで、意外と前処理が必要だった。

    8. SlackはWebhookで通知

    最後はSlack通知だが、今回はSlackノードではなく Incoming Webhook を使った。なので、最後のノードは HTTP Request になる。POST先はSlackのWebhook URLで、BodyはJSON。本文には要約と元記事URLを入れた。

    {
      "text": "📰 {{$json.title_ja}}\n\n{{$json.summary_3lines[0]}}\n{{$json.summary_3lines[1]}}\n{{$json.summary_3lines[2]}}\n\n🔗 {{$json.link}}"
    }

    これで、Slackにタイトル、3行要約、元記事URLつきで流せる。リンクがあるだけで後から確認しやすさがかなり変わる。結果しっかりニュースがSlackに届くようになった。

    画像
    Slackで欲しいニュースを受け取れた

    まとめ

    今回のn8n設定でポイントだったのは、単にノードをつなぐことではなく、途中のデータ構造をちゃんと整えることだった。特に引っかかりやすかったのはこのあたりだ。

    ・RSS URLそのものが間違っている(情報が古い)
    ・URLに空白や未エスケープ文字が混ざる
    ・Remove Duplicates の履歴サイズ不足
    ・OpenAI の返答がJSON文字列のままで IF が効かない
    ・Codeノードで元記事URLを消してしまう

    このあたりを押さえると、ニュース収集の自動化はかなり形になる。
    n8nは「つなげば終わり」に見えて、実際にはデータの持ち方がとても大事だと実感した。

    ただ、一度組んでしまえば、自分の関心に合った記事だけが自動でSlackに流れてくるようになる。情報収集の負担を減らしたい人には、かなり相性のいい使い方だと思う。とりあえず仕組みは構築できたので、ゆっくり配信サイトの選別でも行おう。

    ちなみにn8nで推し活もできるみたいだ。利用価値は無限大。


    この記事が参加している募集

     
     
    初めまして。福岡在住の40代現役SEです。AI副業の実験。目指すはこのnoteで0→1。実験の結果うまくいったものはプロンプトなどで配布したいと思います。 別アカ https://note.com/3d_works 好き勝手書いてます。

    あなたへのおすすめ