Firestoreへのスクレイピングデータ挿入と重複チェック

TL;DR スクレイピングで取得したデータをFirestoreに保存する際、重複データの挿入を避ける方法について解説します。この記事では、URLフィールドを一意の識別子として使用し、重複チェックを行いながら効率的にデータを保存する方法を紹介します。 Private Key の改行コードで詰まった Firestore に一括で書き込みができなくて詰まった Apps Script のライブラリの仕様を理解する必要があった などを書いていきます。 Firestoreの設定 まず、Firest...