「毎週月曜の朝、Excelレポートを手作業で作るのが苦痛…」 こんな悩みを抱えているエンジニアや情シス担当の方は多いのではないでしょうか。複数のデータソースからデータを集め、加工し、見栄えの良いExcelファイルに整形する——この一連の作業は ...

スリーシェイクは2026年4月13日、クラウドETLツール「Reckoner（レコナー）」に、PythonまたはJavaScriptでデータ処理を実装できる「コード実行機能」を追加したと発表した。GUIによるノーコード操作だけでなく、コードによるカスタム処理を組み合わせた柔軟な ...

株式会社スリーシェイク（本社：東京都中央区、代表取締役社長：吉田 拓真、以下スリーシェイク）が提供するクラウド型データ連携ツール「Reckoner（レコナー）」は、データ連携フロー内でPythonおよびJavaScriptのコードを記述し、独自のデータ処理を実装 ...

InfoQのすべての体験をアンロックして、そのメリットを最大限に活用しましょう ログインして、InfoQのすべての体験をアンロックしましょう！お気に入りの著者やトピックの最新情報を入手し、コンテンツと交流し、限定リソースをダウンロードできます。

最近とりあえず全データを分析基盤に突っ込むという戦略を取る企業も見かけました。 データソースからデータレイクやDWHへETL処理を行う際、全てのテーブル（データ）を対象にするという方針は一見便利に見えます。しかし、実際には、開発・運用コスト ...

ENG↓ ETLパイプライン ― 企業データ基盤の中核 データは、正しく収集・処理・活用されて初めて価値を生み出します。 ETLパイプライン（Extract・Transform・Load）は、 データを常に正確で分析可能な状態に保つ自動化プロセスです。 ETLパイプラインの構成 ...

売上データETL＋可視化パイプライン｜非エンジニアでも使える売上分析ツール Excel・CSVで管理されたバラバラの売上データを一括統合・整形・可視化するETLパイプライン＆Streamlitアプリです。 実務でありがちな「日付形式の揺れ」「カラム名の不統一 ...

前章で述べたglycoMusubiの設計を実際のグラフとして具現化するためには、複数の外部データソースからデータを取得し、変換し、統合する自動化された処理基盤が必要である。本章では、glycoMusubiの構築を担う**ETL（Extract, Transform, Load）パイプライン**の詳細を解説する。

リバースETL（Extract、Transform、Load）は、ビジネスデータを操作化するためのデータ統合技術です。ソースシステム（データウェアハウスなど）からデータを抽出、変換し、ターゲットシステム（SaaSプラットフォームやビジネスアプリケーション、例えば ...

簡単に言えば、ETL はデータパイプラインの一種ですが、すべてのデータパイプラインが ETL パイプラインとは限りません。データパイプラインは、システム間でデータを転送する幅広いプロセスを指し、場合によっては変換を伴わないこともあります。