NEWS
2025/04/04
障害情報
(暫定対応 完了) mdxⅡシステムにおけるボリューム破損およびスナップショット関連エラーについて

(2025/6/3 追記)
本エラーについて暫定対応を完了しました。詳細は以下をご確認ください。

mdx IIシステムの運用再開とGPUノード提供開始のお知らせ

—-
 
現在、mdxⅡシステムにおきまして、以下の障害が発生しております。

1. インスタンスのボリューム破損によるファイルシステムエラー

・障害内容

mdxⅡのRed Hat OpenStack Platform において、一部のインスタンスでボリューム破損が発生することがあります。
インスタンスの起動中、または起動時にインスタンスのOSでファイルシステムエラーおよび書き込み不可となる問題を確認しております。
以下は本問題が発生した際のOSのファイルシステムエラーの出力例です。

【Ubuntu Server 22.04の出力例】

#80887: comm rs:main Q:Reg: iget: checksum invalid
[ 9470.149891] EXT4-fs (vda1): Remounting filesystem read-only
[ 9470.151476] EXT4-fs error (device vda1): ext4_lookup:1858: inode

・対応状況:

障害原因を調査中です。

現時点での検証結果では、Rocky Linuxインスタンスでは比較的発生頻度が低い傾向にありますが、
Rocky Linuxで問題が一切発生しないと断言できる状況には至っておりません。

・暫定対応:

ファイルシステムエラーが発生した場合は、大変お手数ですが、問い合わせフォーム からご連絡ください。
以下のいずれかの方法で復旧を行います。

・fsckによるファイルシステムの修復
・ボリュームファイルのバックアップからの復旧
※システム側で毎日1:00にボリュームファイルのバックアップを実施しております。
バックアップから復旧した場合、最短で1日前、最長で2週間前の状態に戻ります。

2. インスタンスのスナップショット及びボリュームのスナップショットからのボリューム作成エラー

2025/5/19-5/21のメンテナンスにより、本スナップショット機能の不具合が解消され、
メンテナンス終了後は正常にご利用いただけるようになる見込みです。

・障害内容:

mdxⅡのRed Hat OpenStack Platformにおいて、インスタンス及びボリュームから取得したスナップショットから
新規にボリュームを作成する際、2回目以降のスナップショットからボリュームを作成するとエラーが発生する問題を確認しております。
以下の操作で、インスタンス、またはボリュームのスナップショットを取得(2回目以降)し、取得したスナップショットからのボリューム作成を行うと本問題が発生します。

【インスタンスのスナップショットからのボリューム作成】

(1) ユーザポータルにログイン
(2) [プロジェクト]メニュー > [コンピュート]パネル > [インスタンス]タブをクリック
(3) スナップショットを取得するインスタンスのActions欄で[スナップショットの作成]をクリック
→本操作の2回目以降で取得したスナップショットが本問題に該当します。
(4) [プロジェクト]メニュー > [コンピュート]パネル > [イメージ]タブをクリック
(5) 取得したスナップショットの右端にあるプルダウンメニューから[ボリュームの作成]をクリックしボリュームを作成

 
【ボリュームのスナップショットからのボリューム作成】

(1) ユーザポータルにログイン
(2) [プロジェクト]メニュー > [ボリューム]パネル > [ボリューム]タブをクリック
(3) スナップショットを取得するボリュームのActions欄で[スナップショットの作成]をクリック
→本操作の2回目以降で取得したスナップショットが本問題に該当します。
(4) [プロジェクト]メニュー > [ボリューム]パネル > [スナップショット]タブをクリック
(5) 取得したスナップショットの右端にあるプルダウンメニューから[ボリュームの作成]をクリックしボリュームを作成

・対応状況:

Red Hat OpenStack Platformの不具合となっており、原因を調査中です。

・暫定対応:

本障害の発生を抑制するため、一時的にユーザーポータルで以下の操作、及びタブを非表示にしております。
ご迷惑をおかけいたしますが、本障害が解消されるまでインスタンスのスナップショット取得とボリュームスナップショットに対する操作はできません。

+ 【インスタンスのスナップショットからのボリューム作成】の(3)の[スナップショットの作成]を非表示
+ 【ボリュームのスナップショットからのボリューム作成】の(4)の[スナップショット]タブを非表示

 
ご不便をおかけしますが、何卒ご理解いただきますようお願いいたします。