·incremental-fetch
</>

incremental-fetch

shipshitdev/library

API から復元力のあるデータ取り込みパイプラインを構築します。外部 API (Twitter、取引所、任意の REST API) からページ分割されたデータをフェッチし、進行状況を追跡し、重複を回避し、レート制限を処理し、増分更新と履歴バックフィルの両方をサポートする必要があるスクリプトを作成する場合に使用します。トリガー: 「API からのデータの取り込み」、「ツイートのプル」、「履歴データの取得」、「X からの同期」、「データ パイプラインの構築」、「再ダウンロードせずに取得」、「ダウンロードの再開」、「古いデータのバックフィル」。対象外: 単純なワンショット API 呼び出し、WebSocket/ストリーミング接続、ファイルのダウンロード、ページネーションのない API。

34インストール·0トレンド·@shipshitdev

インストール

$npx skills add https://github.com/shipshitdev/library --skill incremental-fetch

SKILL.md

Build data pipelines that never lose progress and never re-fetch existing data.

Track TWO cursors to support both forward and backward fetching:

| newestid | Fetch new data since last run | sinceid | | oldestid | Backfill older data | untilid |

API から復元力のあるデータ取り込みパイプラインを構築します。外部 API (Twitter、取引所、任意の REST API) からページ分割されたデータをフェッチし、進行状況を追跡し、重複を回避し、レート制限を処理し、増分更新と履歴バックフィルの両方をサポートする必要があるスクリプトを作成する場合に使用します。トリガー: 「API からのデータの取り込み」、「ツイートのプル」、「履歴データの取得」、「X からの同期」、「データ パイプラインの構築」、「再ダウンロードせずに取得」、「ダウンロードの再開」、「古いデータのバックフィル」。対象外: 単純なワンショット API 呼び出し、WebSocket/ストリーミング接続、ファイルのダウンロード、ページネーションのない API。 ソース: shipshitdev/library。

原文を見る

引用可能な情報

AI/検索での引用用の安定したフィールドとコマンド。

インストールコマンド
npx skills add https://github.com/shipshitdev/library --skill incremental-fetch
カテゴリ
</>開発ツール
認証済み
初回登録
2026-02-01
更新日
2026-02-18

クイックアンサー

incremental-fetch とは?

API から復元力のあるデータ取り込みパイプラインを構築します。外部 API (Twitter、取引所、任意の REST API) からページ分割されたデータをフェッチし、進行状況を追跡し、重複を回避し、レート制限を処理し、増分更新と履歴バックフィルの両方をサポートする必要があるスクリプトを作成する場合に使用します。トリガー: 「API からのデータの取り込み」、「ツイートのプル」、「履歴データの取得」、「X からの同期」、「データ パイプラインの構築」、「再ダウンロードせずに取得」、「ダウンロードの再開」、「古いデータのバックフィル」。対象外: 単純なワンショット API 呼び出し、WebSocket/ストリーミング接続、ファイルのダウンロード、ページネーションのない API。 ソース: shipshitdev/library。

incremental-fetch のインストール方法は?

ターミナルまたはコマンドラインツール(Terminal、iTerm、Windows Terminal など)を開きます このコマンドをコピーして実行します: npx skills add https://github.com/shipshitdev/library --skill incremental-fetch インストール後、スキルは自動的に AI コーディング環境に設定され、Claude Code や Cursor で使用できるようになります

ソースリポジトリはどこですか?

https://github.com/shipshitdev/library