takemikami's shoptakemikami's shop

Apache Airflow ワークフロー プログラミング入門 ETL処理のためのワークフロー書き方ガイド

Apache Airflowで ETL処理のワークフローを書くための プログラミングを解説した電子書籍です。 ※無料サンプルで、第1章前半までの内容をご覧いただけます。 ※技術書典11の案内はこちらからご覧いただけます。 https://techbookfest.org/product/5340811145248768 ■商品の紹介 Apache Airflowで ETL処理のワークフローをプログラミングするための知識として、 ジョブ管理システムとの考え方の違い、 DAGや集計対象期間の概念、OperatorとSensor、 失敗時の処理、定期実行の設定方法などを解説します。 ■商品情報 種別: 電子書籍(PDF) A5版 40ページ 言語: 日本語 発売日: 2021/07/10 (初版) 技術書典11にて頒布予定 ■目次 第1章 Apache Airflowとは  1.1 ETL  1.2 Apache Airflow 第2章 環境構築と単純なDAG  2.1 開発用の環境構築  2.2 単純なDAGの実行 第3章 DAGの書き方  3.1 DAGはどのように動作するのか  3.2 OperatorとSensor  3.3 外部システムとの接続  3.4 依存関係と並列実行  3.5 失敗時の処理 第4章 DAGの実行  4.1 定期実行  4.2 テンプレート  4.3 タスク間のパラメータ引き渡し  4.4 backfill ■著者紹介 三上威 (データエンジニア、データサイエンティスト) 略歴:  甲南大学理学部にて応用数学を学んだ後、  NECソフトウェア神戸、ディー・エヌ・エーにて、  システムエンジニア・データマイニングエンジニア。  フリーランスのITエンジニアとして独立後、  アーリース情報技術株式会社を設立。現在、同社社長。

Apache Airflowで ETL処理のワークフローを書くための プログラミングを解説した電子書籍です。 ※無料サンプルで、第1章前半までの内容をご覧いただけます。 ※技術書典11の案内はこちらからご覧いただけます。 https://techbookfest.org/product/5340811145248768 ■商品の紹介 Apache Airflowで ETL処理のワークフローをプログラミングするための知識として、 ジョブ管理システムとの考え方の違い、 DAGや集計対象期間の概念、OperatorとSensor、 失敗時の処理、定期実行の設定方法などを解説します。 ■商品情報 種別: 電子書籍(PDF) A5版 40ページ 言語: 日本語 発売日: 2021/07/10 (初版) 技術書典11にて頒布予定 ■目次 第1章 Apache Airflowとは  1.1 ETL  1.2 Apache Airflow 第2章 環境構築と単純なDAG  2.1 開発用の環境構築  2.2 単純なDAGの実行 第3章 DAGの書き方  3.1 DAGはどのように動作するのか  3.2 OperatorとSensor  3.3 外部システムとの接続  3.4 依存関係と並列実行  3.5 失敗時の処理 第4章 DAGの実行  4.1 定期実行  4.2 テンプレート  4.3 タスク間のパラメータ引き渡し  4.4 backfill ■著者紹介 三上威 (データエンジニア、データサイエンティスト) 略歴:  甲南大学理学部にて応用数学を学んだ後、  NECソフトウェア神戸、ディー・エヌ・エーにて、  システムエンジニア・データマイニングエンジニア。  フリーランスのITエンジニアとして独立後、  アーリース情報技術株式会社を設立。現在、同社社長。