データアナリティクス事業本部の鈴木です。 COPYコマンドでRedshiftに、フィールドの区切り文字がカンマ以外のファイルをロードする機会がありました。 データベース開発者ガイド – データ形式パラメータを確認すると、 […]…
scikit-learnのextract_patches_2dで画像を小さいパッチに切り出す
データアナリティクス事業本部の鈴木です。 scikit-learnのextract_patches_2dを使うと、画像を小さいパッチに切り出すことができます。 どのような挙動をするのか、例が少なかったため、試してみました […]…
[AKIBA.AWS ONLINE #07]Redshift内のデータの活用をAthenaにオフロードしてみた[資料公開]
データアナリティクス事業本部の鈴木です。 11月12日 (金) に開催された「AKIBA.AWS ONLINE #07」にて、「Redshift内のデータの活用をAthenaにオフロードしてみた」というタイトルで登壇しま […]
CVATのアノテーションタスクをほかの人と共有する
データアナリティクス事業本部の鈴木です。 以前、画像アノテーションツールのComputer Vision Annotation Tool(以降、CVAT)を紹介しました。 今回はCVAT間でタスクを受け渡しする方法を紹介 […]
CVATに既存のアノテーションをインポートする
データアナリティクス事業本部の鈴木です。 以前、画像アノテーションツールのComputer Vision Annotation Tool(以降、CVAT)を紹介しました。 CVATでバウンディングボックスをアノテーション […]
JupyterHubのpre_spawn_hookでコンテナ起動前にブートストラップを実行する
データアナリティクス事業本部の鈴木です。 今回はJupyterHubのDockerSpawnerで、コンテナ起動前にブートストラップを実行する方法を紹介します。 DockerSpawnerとは DockerSpawner […]
JupyterHubのDockerSpawnerで起動するイメージを替える
データアナリティクス事業本部の鈴木です。 今回は、JupyterHubのDockerSpawnerで起動するイメージを替える方法を紹介します。 DockerSpawnerとは DockerSpawnerは、Jupyter […]
CloudFormationでSNSトピックへの複数のイベント通知を設定したS3バケットを作成する
データアナリティクス事業本部の鈴木です。 CloudFormation（以降CFn）でSNSトピックへの複数のイベント通知を設定したS3バケットを作成してみました。 やりたいこと CFnテンプレートでSNSトピックへのイ […]…
scikit-learn 1.0でstableになったHistGradientBoostingClassifierを使ってみる
データアナリティクス事業本部の鈴木です。 はじめに 先日、scikit-learn 1.0がリリースされました。 Release Highlights for scikit-learn 1.0 リリースハイライトとリリー […]
FeatureUnionを使って機械学習パイプライン内で複数の変換結果を連結する
データアナリティクス事業本部の鈴木です。 今回は、sklearn.pipelineモジュールから、同一のカラムに異なるtransformerを適用し、その結果を結合する際に利用できるFeatureUnionを紹介します。 […]…