Asakusa Framework チュートリアル

このチュートリアルでは Asakusa Framework のサンプルアプリケーションを作成しながら、フレームワークの基本的な使い方や開発の流れを説明していきます。

目次

• 1. はじめに
  • 1.1. チュートリアルの構成
  • 1.2. 対象読者
  • 1.3. サンプルアプリケーション
  • 1.4. ドキュメントについて
• 2. アプリケーション開発の流れ
  • 2.1. 概要
  • 2.2. アプリケーションの設計
  • 2.3. アプリケーションの実装
  • 2.4. 関連ドキュメント
• 3. サンプルアプリケーションの説明
  • 3.1. アプリケーションの概要
  • 3.2. データフロー図
  • 3.3. データ構造
  • 3.4. 外部入出力仕様
  • 3.5. バッチ処理仕様
• 4. 開発環境の準備
  • 4.1. 前提環境
  • 4.2. 環境変数の設定
  • 4.3. 関連ドキュメント
• 5. Eclipse環境のセットアップ
  • 5.1. Eclipseの起動
  • 5.2. Eclipseの設定
  • 5.3. Shafuのインストール
  • 5.4. Shafuの設定確認
  • 5.5. 関連ドキュメント
• 6. プロジェクトの作成
  • 6.1. テンプレートからアプリケーションプロジェクトを作成
  • 6.2. プロジェクトのディレクトリ構成
  • 6.3. トラブルシューティング
• 7. Asakusa Frameworkのインストール
  • 7.1. 開発環境にAsakusa Frameworkをインストールする
  • 7.2. トラブルシューティング
• 8. DMDLによるデータモデルの定義
  • 8.1. DMDLとは
  • 8.2. DMDLスクリプトを作成する
  • 8.3. DMDLスクリプトの構文
  • 8.4. データモデルを定義する
  • 8.5. データモデルクラスを生成する
  • 8.6. レコードモデル
  • 8.7. 終わりに
  • 8.8. 関連ドキュメント
• 9. 結合モデルと集計モデルの定義
  • 9.1. 結合モデルを作成する
  • 9.2. 集計モデルを作成する
  • 9.3. 終わりに
  • 9.4. 関連ドキュメント
• 10. CSVフォーマットの定義
  • 10.1. 外部入出力に利用するデータモデル
  • 10.2. Direct I/O CSVのフォーマット情報を定義する
  • 10.3. 終わりに
  • 10.4. 関連ドキュメント
• 11. DMDLのコンパイル
  • 11.1. データモデルクラスの生成
  • 11.2. ジョブフロー入出力基底クラス
  • 11.3. 関連ドキュメント
• 12. 演算子の作成
  • 12.1. 演算子とOperator DSL
  • 12.2. 演算子クラスを作成する
  • 12.3. 演算子メソッドを作成する
  • 12.4. 終わりに
  • 12.5. 関連ドキュメント
• 13. 演算子のコンパイル
  • 13.1. 演算子のコンパイル
  • 13.2. 演算子実装クラス
  • 13.3. 演算子ファクトリ
  • 13.4. 関連ドキュメント
• 14. 演算子のテスト
  • 14.1. 演算子のテストクラスを作成する
  • 14.2. 演算子のテストメソッドを作成する
  • 14.3. テストを実行する
  • 14.4. 終わりに
  • 14.5. 関連ドキュメント
• 15. フロー部品の作成
  • 15.1. データフローとFlow DSL
  • 15.2. フロー部品とジョブフロー
  • 15.3. データフロー図
  • 15.4. フロー部品クラスを作成する
  • 15.5. フロー部品コンストラクタを作成する
  • 15.6. フロー記述メソッドを作成する
  • 15.7. 終わりに
  • 15.8. 関連ドキュメント
• 16. フロー部品のコンパイル
  • 16.1. フロー部品のコンパイル
  • 16.2. 演算子ファクトリクラス
  • 16.3. 関連ドキュメント
• 17. フロー部品のテスト
  • 17.1. データフローのテスト
  • 17.2. テストデータの準備
  • 17.3. テストデータテンプレートを生成する
  • 17.4. テストデータの構成を定義する
  • 17.5. 入力データを定義する
  • 17.6. 期待値を定義する
  • 17.7. 出力の検証方法を定義する
  • 17.8. フロー部品のテストクラスを作成する
  • 17.9. フロー部品のテストメソッドを作成する
  • 17.10. テストを実行する
  • 17.11. テストケースを追加する
  • 17.12. 終わりに
  • 17.13. トラブルシューティング
  • 17.14. 関連ドキュメント
• 18. ジョブフローの作成
  • 18.1. ジョブフロー
  • 18.2. インポータ記述を作成する
  • 18.3. エクスポータ記述を作成する
  • 18.4. ジョブフロークラスを作成する
  • 18.5. ジョブフローコンスタクタを作成する
  • 18.6. フロー記述メソッドを作成する
  • 18.7. 終わりに
  • 18.8. 関連ドキュメント
• 19. ジョブフローのテスト
  • 19.1. ジョブフローのテスト
  • 19.2. ジョブフローのテストメソッドを作成する
  • 19.3. 関連ドキュメント
• 20. バッチの作成
  • 20.1. ワークフローとBatch DSL
  • 20.2. バッチクラスを作成する
  • 20.3. バッチ記述メソッドを作成する
  • 20.4. 終わりに
  • 20.5. 関連ドキュメント
• 21. バッチのテスト
  • 21.1. バッチのテスト
  • 21.2. バッチのテストメソッドを作成する
  • 21.3. 関連ドキュメント
• 22. バッチのコンパイル
  • 22.1. Batch DSLコンパイラ
  • 22.2. バッチアプリケーションをコンパイルする
  • 22.3. 関連ドキュメント
• 23. デプロイ用パッケージの作成
  • 23.1. デプロイメントアーカイブ
  • 23.2. デプロイメントアーカイブを生成する
  • 23.3. デプロイメント構成のカスタマイズ
  • 23.4. 終わりに
  • 23.5. 関連ドキュメント
• 24. Spark環境へのデプロイ
  • 24.1. 前提環境
  • 24.2. 環境変数の設定
  • 24.3. デプロイメントアーカイブの配置
  • 24.4. デプロイメントアーカイブの展開
  • 24.5. テストデータの配置
  • 24.6. 関連ドキュメント
• 25. Spark環境上のバッチ実行
  • 25.1. YAESS
  • 25.2. バッチアプリケーションの実行
  • 25.3. バッチアプリケーション実行結果の確認
  • 25.4. 関連ドキュメント
• 26. 終わりに
• 27. 練習問題
  • 27.1. 練習問題 1
  • 27.2. 練習問題 2
  • 27.3. 練習問題 3
  • 27.4. 練習問題 4