Zero to JupyterHub with Kubernetes(Z2JH)でユーザデータをS3にバックアップ

AWS EKS Jupyter S3 Kubernetes JupyterHub

背景 EKSでZero to JupyterHub with Kubernetes（Z2JH）で構築したJupyterHubを運用しています。障害時の回復力を高めるため、AWS外のストレージ（Cloud Storage等）にバックアップの複製を作成することになり、Storage Transfer ServiceやRcloneの利用が可…

#Kubernetes #Jupyter #EKS

2023-08-19

EKSのマネージド型ノードを並列更新

AWS EKS Kubernetes

ノードを並列更新することで、マネージド型ノードグループの更新時間を短縮できるようなので試してみました。 docs.aws.amazon.com It determines the maximum quantity of nodes to upgrade in parallel using the updateConfig property for the node grou…

#EKS #AWS #Kubernetes

2023-07-27

Container InsightsでFluentdをFluent Bitに変更

AWS CloudWatch Logs EKS fluentd Kubernetes fluentbit

はじめに EKS 1.24へのアップグレードに伴い、コンテナのログをFluent BitでCloudWatch Logsに送るように変更しました。 Amazon EKS Kubernetes versions - Amazon EKS If you already have Fluentd configured for Container Insights, then you must migra…

#AWS #EKS #Kubernetes #fluentbit #fluentd #CloudWatch Logs

2022-12-19

AWS Load Balancer Controllerをv2.0.1からv2.4.5にアップデート

AWS EKS Kubernetes

AWS Load Balancer Controllerをv2.0.1からv2.4.5にアップデートにしたので手順をメモします。リージョンは東京（ ap-northeast-1 ）です。 ❯ helm history aws-load-balancer-controller -n kube-system REVISION UPDATED STATUS CHART APP VERSION DESCRI…

#AWS #EKS #Kubernetes

2021-08-24

Kubernetes(EKS)でApacheの統計情報を使用した水平オートスケール（Prometheus Adaptor/Apache Exporter）

AWS Kubernetes EKS

本エントリではApache（prefork）のプロセス数でPodを水平オートスケールする手順をまとめます。大まかな流れとしては、Apache ExporterでPrometheusにメトリクスを収集し、Prometheus AdaptorでHPAにカスタムメトリクスを連携していきます。実行環境 Prom…

2020-12-26

VeleroでEKSクラスタをバックアップ

EKS Kubernetes AWS

VeleroでEKSクラスタのバックアップを試してみたので手順をまとめます。今回はプロバイダーがAWS、オブジェクトストアがS3なのでvelero-plugin-for-awsの手順に従ってインストールを行います。その他サポートしているプロバイダーはこちらを参照してくださ…

#Kubernetes #EKS #AWS

2020-12-01

JupyterHubをKubernetes(Amazon EKS)にインストール（zero-to-jupyterhub-k8s 0.9.0）

AWS EKS Kubernetes Jupyter

Amazon EKSにJupyterHubを zero-to-jupyterhub-k8s（Z2JH）でインストールする方法をまとめます。 github.com 以下の手順に従って作業を実施します。 Zero to JupyterHub with Kubernetes — Zero to JupyterHub with Kubernetes 0.0.1-set.by.chartpress doc…