incremental-fetch
✓API から復元力のあるデータ取り込みパイプラインを構築します。外部 API (Twitter、取引所、任意の REST API) からページ分割されたデータをフェッチし、進行状況を追跡し、重複を回避し、レート制限を処理し、増分更新と履歴バックフィルの両方をサポートする必要があるスクリプトを作成する場合に使用します。トリガー: 「API からのデータの取り込み」、「ツイートのプル」、「履歴データの取得」、「X からの同期」、「データ パイプラインの構築」、「再ダウンロードせずに取得」、「ダウンロードの再開」、「古いデータのバックフィル」。対象外: 単純なワンショット API 呼び出し、WebSocket/ストリーミング接続、ファイルのダウンロード、ページネーションのない API。
SKILL.md
Build data pipelines that never lose progress and never re-fetch existing data.
Track TWO cursors to support both forward and backward fetching:
| newestid | Fetch new data since last run | sinceid | | oldestid | Backfill older data | untilid |
API から復元力のあるデータ取り込みパイプラインを構築します。外部 API (Twitter、取引所、任意の REST API) からページ分割されたデータをフェッチし、進行状況を追跡し、重複を回避し、レート制限を処理し、増分更新と履歴バックフィルの両方をサポートする必要があるスクリプトを作成する場合に使用します。トリガー: 「API からのデータの取り込み」、「ツイートのプル」、「履歴データの取得」、「X からの同期」、「データ パイプラインの構築」、「再ダウンロードせずに取得」、「ダウンロードの再開」、「古いデータのバックフィル」。対象外: 単純なワンショット API 呼び出し、WebSocket/ストリーミング接続、ファイルのダウンロード、ページネーションのない API。 ソース: shipshitdev/library。
引用可能な情報
AI/検索での引用用の安定したフィールドとコマンド。
- インストールコマンド
npx skills add https://github.com/shipshitdev/library --skill incremental-fetch- カテゴリ
- </>開発ツール
- 認証済み
- ✓
- 初回登録
- 2026-02-01
- 更新日
- 2026-02-18
クイックアンサー
incremental-fetch とは?
API から復元力のあるデータ取り込みパイプラインを構築します。外部 API (Twitter、取引所、任意の REST API) からページ分割されたデータをフェッチし、進行状況を追跡し、重複を回避し、レート制限を処理し、増分更新と履歴バックフィルの両方をサポートする必要があるスクリプトを作成する場合に使用します。トリガー: 「API からのデータの取り込み」、「ツイートのプル」、「履歴データの取得」、「X からの同期」、「データ パイプラインの構築」、「再ダウンロードせずに取得」、「ダウンロードの再開」、「古いデータのバックフィル」。対象外: 単純なワンショット API 呼び出し、WebSocket/ストリーミング接続、ファイルのダウンロード、ページネーションのない API。 ソース: shipshitdev/library。
incremental-fetch のインストール方法は?
ターミナルまたはコマンドラインツール(Terminal、iTerm、Windows Terminal など)を開きます このコマンドをコピーして実行します: npx skills add https://github.com/shipshitdev/library --skill incremental-fetch インストール後、スキルは自動的に AI コーディング環境に設定され、Claude Code や Cursor で使用できるようになります
ソースリポジトリはどこですか?
https://github.com/shipshitdev/library
詳細
- カテゴリ
- </>開発ツール
- ソース
- skills.sh
- 初回登録
- 2026-02-01