メインコンテンツへスキップ
メインコンテンツへスキップ

データインジェスト

ClickHouse は、データ統合および変換のために数多くのソリューションと連携しています。 詳しくは、以下のページを参照してください。

Data Ingestion Tool説明
Airbyteオープンソースのデータ統合プラットフォームです。ELT データパイプラインを構築でき、140 を超える標準搭載コネクタが提供されています。
Apache Sparkシングルノードマシンまたはクラスター上で、データエンジニアリング、データサイエンス、および機械学習を実行するための多言語対応エンジンです。
Apache FlinkFlink の DataStream API を通じて、ClickHouse へのリアルタイムなデータインジェストおよび処理を行うためのソリューションで、バッチ書き込みにも対応しています。
Amazon GlueAmazon Web Services (AWS) が提供するフルマネージドのサーバーレス型データ統合サービスであり、分析、機械学習、アプリケーション開発向けに、データの検出、準備、変換プロセスを簡素化します。
Azure SynapseMicrosoft Azure が提供するフルマネージドのクラウド型分析サービスであり、ビッグデータとデータウェアハウジングを統合し、SQL、Apache Spark、データパイプラインを用いて、大規模なデータ統合・変換・分析を簡素化します。
Azure Data Factoryクラウドベースのデータ統合サービスであり、大規模なデータワークフローを作成、スケジュール、およびオーケストレーションすることができます。
Apache Beamバッチおよびストリーム（継続的）データ処理パイプラインの定義と実行を可能にする、オープンソースの統一プログラミングモデルです。
BladePipeサブセカンドレイテンシでリアルタイムなエンドツーエンドのデータ統合を実現し、プラットフォーム間のシームレスなデータフローを可能にするツールです。
dbtアナリティクスエンジニアが、単に SELECT 文を書くことで、データウェアハウス内のデータを変換できるようにします。
dltPython スクリプトに追加して使用できるオープンソースライブラリであり、多様でしばしば扱いにくいデータソースから、適切に構造化された最新のデータセットへデータをロードできます。
Fivetranクラウドデータプラットフォームから外部へ、内部へ、またプラットフォーム間でのデータ移動を自動化するデータムーブメントプラットフォームです。
NiFiソフトウェアシステム間のデータフローを自動化するために設計された、オープンソースのワークフロー管理ソフトウェアです。
Vector組織が自らのオブザーバビリティデータを制御できるようにする、高性能なオブザーバビリティデータパイプラインです。