コンテナレジストリメタデータデータベース セルフマネージド

セルフマネージドユーザーへのコンテナレジストリメタデータデータベースのロールアウトに関するプロジェクト計画。

週次プロジェクト計画

Epic: https://gitlab.com/groups/gitlab-org/-/epics/5521

マイルストーン 16.3(2023年6月18日〜7月17日)

目標

8月14日〜18日の週

  • 完了:
    • 機能ベースのロールアウトアプローチのために構造化された新しいテーブルを含むアーキテクチャブループリントを更新: https://gitlab.com/gitlab-org/gitlab/-/merge_requests/128824
    • 新規インストールの Helm と Omnibus を使用したデータベースインストールの POC を完了。両方のインストールパスのデモ動画が Issue に投稿されています。
    • Headway オートメーションを実装。~headway-self-managed-registry-db label でマークされたすべての Issue と MR が epic のテーブルに追加されます。
    • プロダクトチームが他のベータプログラムでユーザーとのコミュニケーションがどのように構成されているかを、登録とフィードバック用の個別の Issue を通じて調査中。これはサポートの担当者を通じてお問い合わせいただいたユーザー向けのコミュニケーションチャネルも提供します。

マイルストーン 16.4(2023年8月18日〜9月17日)

目標

8月21日〜26日の週

  • 計画:
    • 先週議論した機能ベースのロールアウトアプローチのために機能とドラフト変更を定義する。この機能のマトリックスはアーキテクチャブループリントに記載されます。
    • 今週ベータプログラムを正式に開始する。
    • 異なるタイプのストレージバックエンドとレジストリサイズを使用してデータ移行戦略のテストを続ける。
    • 先週の POC で完了した発見に続いて、Omnibus と Helm Chart のインストール作業を開始する。
    • Omnibus インストールでメタデータデータベースを有効化・設定する実験 https://gitlab.com/gitlab-org/container-registry/-/issues/1071
  • 完了:

8月28日〜9月1日の週

  • 計画:
    • Issue でユーザーとやり取りするための Issue を作成する。今週ベータプログラムの最初のユーザーを特定する。
    • Omnibus でコンテナレジストリデータベースをプロビジョニングするための議論と調査 https://gitlab.com/gitlab-org/container-registry/-/issues/1102
    • スケーラビリティのためにさまざまなサイズのレジストリでテストする。
    • ユーザーとのやり取りに備えてサポートの担当者と調整する。
  • 完了:
    • ベータプログラムへの関心フィードバックに関するユーザーとのコミュニケーション用 Issue を作成。ベータプログラムの最初のユーザー候補との議論が進行中。
    • テストを通じて、データベース設定の保持に問題が発見されました。ベータユーザーがインストールを開始できるようになる前に 16.4 で修正する必要があります。

9月4日〜8日の週

  • 計画:
    • データベース設定を保持するための Omnibus の MR をレビュー・マージする。
    • 移行プロセスのウォークスルーデモを作成する(Issue
    • テストをより簡単にするためにコンテナレジストリシーダープロジェクトに追加する。
  • 完了:
    • Omnibus の MR をマージしてテストした。
    • インポートプロセスの YouTube 動画を録画した。
    • GCP で 100GB モデルの移行をテストした。(Issue

9月11日〜15日の週

  • 計画:
    • データ整合性のためにロックファイルを使用することを調査する(Issue)。データベース管理オブジェクトに対する非データベースのレジストリ変更(オフラインガベージコレクションなど)を防ぐ。
    • AWS と 500GB モデルでさらなるテストを行う。
  • 完了:
    • メタデータデータベースのデータ整合性を保護するためのロックファイルの技術設計を進展させた。

マイルストーン 16.5(2023年9月17日〜10月10日)

目標

  • コンテナレジストリのベータプログラムを開始し、ドキュメントと移行に関する顧客フィードバックを収集し始める。
  • Omnibus インストール向けにコンテナレジストリデータベースをプロビジョニングする(Issue
  • セルフマネージドインストールでの新しいデータベースの使用を識別するためにサービス ping に観測可能性メトリクスを追加する。
  • さまざまなサイズとストレージバックエンドのテストレジストリでオフライン移行の実行時間をテストする

9月18日〜22日の週

  • 計画:
    • 16.4 リリースにより、データベース設定の保持に関する修正がセルフマネージドで利用可能になり、ユーザーがベータプログラムのテストを開始できるようになります。
    • 詳細なプロジェクト配信目標を定義する
  • 完了:
    • Geo サイト間でのデータ移行とレジストリ変更の実現可能性について Geo と議論した。
    • ロックファイルの初期作業
    • コンテナレジストリプロジェクト向けのサービス ping への観測可能性メトリクスを追加した。

9月25日〜29日の週

  • 計画:
    • ベータユーザーと関わり、最初のインストールからフィードバックを収集する。
    • Geo サポートに関する議論のフォローアップ
    • ロックファイルの実装を続ける
  • 完了:
    • Omnibus の gitlab-ctl にデータベースサブコマンドを追加する進捗 https://gitlab.com/gitlab-org/container-registry/-/issues/1102
    • Omnibus ユーザーが生成されたレジストリ設定を直接編集しないようにクイックスタートガイドを更新した。
    • 観測可能性メトリクスの Rails 実装を完了した。

10月2日〜6日の週

  • 計画:
    • サービス ping メトリクスのダッシュボードを作成してデータをレビューする。
    • オフライン GC の無効化のみにロックファイルを縮小する。
    • Omnibus の gitlab-ctl サブコマンドを続ける。
  • 完了:
    • Omnibus の gitlab-ctl サブコマンドの進捗を継続した。
    • 観測可能性メトリクスの作業を完了し、DB 使用量を追跡するダッシュボードを作成した。

10月9日〜13日の週

  • 計画:
    • ベータフィードバックの最初のフェーズへの対応に関する Issue を洗練する
    • Geo を使用した環境でのデータ移行テスト方法を調査する
  • 完了:
    • ユーザーがインポートで問題を抱えていたレイヤーメディアタイプのサポートを追加した(Issue
    • データベースが使用中の場合にオフライン GC が実行されないようにした(Issue

マイルストーン 16.6(2023年10月17日〜11月10日)

目標

10月16日〜20日の週

  • 計画:
    • 16.5 向けのコンテナレジストリリリースを準備する。
    • 不明なレイヤーメディアタイプのエラーに関するユーザーフィードバックに対応する。
  • 完了:
    • テスト環境でレジストリデータベースの移行コマンドを Omnibus に追加する作業が動作している
    • 大規模レジストリの移行に関する追加テスト

10月23日〜27日の週

  • 計画:
    • OSS と Swift ストレージドライバーを非推奨にする: Issue
    • 失敗する代わりに不明なレイヤーブロブをジェネリックメディアタイプとして保存する: Issue
    • 移行後のタスク実行時にプライマリデータベースノードをターゲットにする機能を追加する Issue
  • 完了:
    • API との同等性において不明なメディアタイプをジェネリックとしてインポートする: Issue
    • OSS と Swift が非推奨になった Issue
    • Omnibus のレジストリデータベース移行サブコマンドが Distribution とのレビューで進行中 MR
    • パフォーマンステストの現在のスコープを完了した

10月30日〜11月3日の週(Q3は10月31日終了)

  • 計画:
    • ベータ Issue でユーザーとのやり取りをいくつか対応する。
    • Omnibus レジストリデータベース移行コマンド MR の進捗を続ける。
  • 完了:
    • レジストリデータベース向けの gitlab-ctl コマンドを追加する MR の進捗 MR

11月6日〜10日の週

  • 計画:
    • セルフマネージドインポートの検証についての調査 epic
    • Omnibus レジストリデータベース移行コマンド MR の進捗を続ける
  • 完了:
    • Omnibus レジストリデータベース移行コマンド MR がレビュー中

11月13日〜17日の週

  • 計画:
    • ベータユーザーの最初のフェーズからのフィードバックに関連する Issue をリリースする。
    • インポートコマンドと移行コマンドを含む Omnibus インストール向けのガイドを作成する。
    • コンテナレジストリデータベースの提供を発表するブログ投稿を開始した。
    • .com 専用機能(現在フィーチャーフラグの背後にある)をセルフマネージドに移行する計画を策定中。
  • 完了:
    • インポーターの進捗バーとより良いログプレゼンテーションの追加を評価する。
    • 大規模レジストリでインポーターを実行しているユーザーと顧客と関わる。
    • GitLab Rails の .com 向けに存在するフィーチャーフラグが付いたコンテナレジストリエンドポイントのリストを作成した。

マイルストーン 16.7(2023年11月13日〜12月21日)

目標

  • 16.6 リリースの改善後にベータユーザーと関わり、セルフマネージドインストールからフィードバックを収集する。
  • インポートされた画像の検証コマンドを作成する Issue

11月20日〜24日の週

  • 計画:
    • Omnibus レジストリデータベース移行コマンドの MR を完成させる。
  • 完了:
    • 大規模なリポジトリでインポーターを実行しているユーザーと顧客と関わる。フィードバックへの対応。

11月27日〜12月1日の週

  • 計画:
    • インポーターの進捗バーと UX の改善を完成させる。
    • インポートプロセスをテストしているベータ顧客とのコミュニケーションを続ける。
  • 完了:
    • 使用状況 ping メトリクスの拡張に関する議論
    • インポーターの進捗バーのドラフトがレビューのために準備できた。

12月4日〜8日の週

12月11日〜15日の週

  • 計画:
    • メタデータデータベースを持つユーザーに今すぐ利用可能な、セルフマネージド向けの新機能を追加/テストするための計画を作成する。
    • インポート後のコンテナイメージ検証の調査を続ける。
  • 完了:
    • インポート後の画像検証ツールを評価する。(Issue

マイルストーン 16.8(2023年12月22日〜2024年1月18日)

目標

  • ベータユーザーの第2フェーズからのフィードバックに関連する Issue を実装する
  • セルフマネージドインポートを検証する
  • チャート向けにオフラインガベージコレクションに既に存在するものと同等の gitlab-ctl などのレジストリデータベースコマンド向けユーティリティサポート

12月18日〜22日の週

  • 計画:
    • 年末年始休暇中にデータ移行を行う主要なレジストリユーザーと協力している。コンテナレジストリチームのほとんどは今週は不在です。

12月25日〜29日の週

  • 計画:
    • 主要なレジストリユーザーのレジストリデータベースのセットアップと移行の支援を続ける。コンテナレジストリチームのほとんどは今週は不在です。
  • 完了:
    • このユーザーの移行が大成功でした!フォローアップの Issue は次のマイルストーンで対応します。

1月1日〜5日の週

  • 計画:
    • 休暇後のキャッチアップとベータユーザーとの継続的な関わり。
  • 完了:
    • 顧客の移行の成功と懸念事項をレビューし、フォローアップの Issue を策定した。

1月8日〜12日の週

  • 計画:
    • ベータユーザーの第2フェーズからのフィードバックに関連する Issue をリリースする。
    • 次のステップ計画と可視性向上のためのコミュニケーションキャンペーンを策定する。
  • 完了:
    • プロジェクト計画と配信ターゲットを再整理した Issue

マイルストーン 16.9(2024年1月13日〜2月15日)

目標

1月22日〜26日の週

  • 計画:
    • Geo サポートのテストを開始する
    • 手動チャート移行のテストとドキュメントを続ける
  • 完了:

1月29日〜2月2日の週

  • 計画:
    • Geo サポートのテストを続ける
    • チャート移行ドキュメントを続ける

マイルストーン 16.10(2024年2月16日〜3月21日)

目標