データ・アナリティクス事業本部の森脇です。 先日、Apache Hudiの新しいバージョンである0.9.0がリリースされました。 いくつかの新機能が追加されており、その中から個人的に気になったものをまとめてみました。 気 […]…
[Apache Hudi]新発表されたGlue3.0でApache Hudiを動かす
データ・アナリティクス事業本部の森脇です。 先日、Spark 3.1に対応したGlue3.0が発表されました。 Apache HudiはSpark3系にも対応していますので、早速動作検証をしてみました。 結論 Glue3 […]…
[Apache Hudi] Datadogと連携してメトリクスを表示する
データ・アナリティクス事業本部の森脇です。 Apache Hudiには0.8.0でメトリクス機能が追加されました。 この機能を使うことで、コミットやロールバックに関するデータを3rdツールと連携することが可能です。 連携 […]…
[Apache Hudi x Athena 新機能] Merge On ReadテーブルをAthenaでクエリする
データ・アナリティクス事業本部の森脇です。 前回に引き続き、Apache Hudi x Amazon Athenaの新機能を試してみます。 前回の記事はこちら： [Apache Hudi] ブートストラップ機能で作成した […]
[レポート] Apache Hudiのテーブル形式の紹介 – Subsurface LIVE Summer 2021
米国時間2021年07月21日〜22日の計2日間、オンラインで開催された「Subsurface LIVE Summer 2021」では、主催となるDremio社のサービスやクラウドデータレイクに関する各種サービスやプロダ […]