Logpushの宛先としてのCloudflare Pipelines
公開日: 2026年4月20日
カテゴリ: Logs、Pipelines
概要
Logpushは従来、JSON形式でCloudflareログをさまざまな宛先に配信するのに優れていました。JSONは柔軟で読みやすいですが、大規模での保存とクエリが非効率になる可能性があります。このリリースでは、ログをPipelinesに直接送信して、ログを取り込み、変換し、R2にParquetファイルまたはR2 Data Catalogで管理されるApache Icebergテーブルとして保存できるようになりました。これにより、データフットプリントがよりコンパクトになり、R2 SQLまたはApache IcebergやParquetをサポートする他のクエリエンジンでログを効率的にクエリできます。
ストレージ前のログ変換
Pipelines SQLは各ログレコードに対してインフライトで実行されるため、データを書き込む前に再構成できます。たとえば、ノイズの多いフィールドを削除したり、機密値をマスクしたり、新しい列を派生させたりできます:
INSERT INTO http_logs_sink
SELECT
ClientIP,
EdgeResponseStatus,
to_timestamp_micros(EdgeStartTimestamp) AS event_time,
upper(ClientRequestMethod) AS method,
sha256(ClientIP) AS hashed_ip
FROM http_logs_stream
WHERE EdgeResponseStatus >= 400;
Pipelines SQLは、文字列関数、正規表現、ハッシング、JSON抽出、タイムスタンプ変換、条件式などをサポートしています。完全なリストについては、Pipelines SQLリファレンスを参照してください。
開始方法
PipelinesをLogpushの宛先として構成するには、「Enable Cloudflare Pipelines」を参照してください。
リソース
- API
- Cloudflareは初めてですか?
- ディレクトリ
- スポンサーシップ
- オープンソース
- サポート
- ヘルプセンター
- システムステータス
- コンプライアンス
- GDPR
企業
- cloudflare.com
- 私たちのチーム
- キャリア
ツール
- Cloudflare Radar
- Speed Test
- Is BGP Safe Yet?
- RPKI Toolkit
- Certificate Transparency
コミュニティ
© 2026 Cloudflare, Inc.
- プライバシーポリシー
- 利用規約
- セキュリティ問題を報告
- 商標
- Cookie設定
このページは役に立ちましたか? はい / いいえ