Table of Contents - rabbit-slide-kou-db-tech-showcase-2021-2021.11.17.0 Documentation
Pages
- README.rd
- Rakefile
-
apache-arrow-flight.rab
- Apache Arrow Flight
- モチベーション
- ビッグデータ処理に必要なもの
- 大量データの収集に必要なもの
- 高速処理に必要なもの
- 今日注目すること
- 高速な分散システムに必要なもの
- 大量データの交換コスト
- 大量データの交換コスト
- 解決策
- Apache Arrow Flightと私
- Apache Arrow Flight
- 簡単な使い方
- GetFlightInfo
- DoGet
- Apache Arrow Flightが扱うデータ
- レコードバッチストリーム
- スライドプロパティー
- なぜストリームが重要か
- ストリームの単位
- レコードバッチと処理
- 詳細
- 高速な分散システムの実現方法
- スケールアウト構成例
- ポイント1:ムダな転送を回避可能
- ポイント2:並列転送可能
- 個々のデータ転送も速い
- なにもしない?
- Apache Arrowフォーマット
- Apache Arrow Flightのまとめ
- Apache Arrow Flightの利用事例
- Apache Arrow Ballista
- アーキテクチャー
- Apache Arrow Ballistaでの使い方
- さらにApache Arrow Flight
- 利用可能なリクエスト1
- 利用可能なリクエスト2
- 利用可能なリクエスト3
- ミドルウェア
- 将来の展望1
- 将来の展望2
- まとめ
- 次のステップ
- config.yaml