GMOクラウド メンテナンス・障害情報

サポートトップ » メンテナンス・障害情報 » すべて » 障害情報詳細

障害情報 2021/12/07 17:22 障害発生日2021.12.07 16:46 復旧 【復旧/GMO CLOUD/クラウドVPS byGMO】一部環境における高負荷につきまして
[2021/12/13 18:38更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、経過観察の結果、問題の再発がございませんでしたので
本復旧とさせていただきます。

■障害発生日時
(1) 2021年12月07日(火) 16時46分頃 ~ 2021年12月08日(水) 15時53分頃
(2) 2021年12月09日(木) 16時00分頃 ~ 19時00分頃
(3) 2021年12月10日(金) 6時30分頃 ~ 8時43分頃

■原因
内部メンテナンスにてスナップショット関連のパラメータ変更をおこなった影響により、
スナップショットの削除処理が大量に走った結果、高負荷が発生いたしました。

(1) スナップショットの削除処理に割り当てられるリソース量を制限し、負荷を緩和することで
復旧いたしました。

(2)・(3) 削除量が多かったことから、リソース割り当てが調整できない状況が発生したため
ストレージ内部のプロセス調整を実施し、負荷を緩和することで復旧いたしました。

後日、スナップショット関連のパラメータについて元に戻すメンテナンスを
実施させていただく予定でございます。

お客さまには長らくご迷惑をおかけし、大変申し訳ございませんでした。
心よりお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/10 18:00更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、現在も引き続き経過観察を継続中でございます。
お客さまには、長らくご迷惑をおかけしており申し訳ございません。

大変恐れ入りますが、本復旧のご案内まで
今しばらくお待ちいただけますよう、謹んでお願い申し上げます。

――――――――――――――――――――――――――――――

[2021/12/10 15:00更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、現在の状況でございますが、
引き続き経過観察を継続しております。

申し訳ございませんが、本復旧のご案内まで
今しばらくお待ちいただけますよう、謹んでお願い申し上げます。

――――――――――――――――――――――――――――――

[2021/12/10 8:54更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、筐体側の負荷が改善されたことを確認いたしましたので、
仮復旧とさせていただきます。

■発生日時
2021年12月10日(金) 6時00分頃 ~ 2021年12月10日 8時40分頃

引き続き負荷状況の経過観察を継続し、問題が確認できなければ
本復旧のご案内をおこなわせていただく予定です。

――――――――――――――――――――――――――――――

[2021/12/10 8:32更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、経過観察を継続しておりましたところ
誠に恐れ入りますが、再度ストレージ負荷が上昇していることを確認いたしました。

そのため、ステータスを「仮復旧」から「発生中」に変更とさせていただきます。

引き続き対応を実施してまいります。長らくご迷惑をおかけしており
大変申し訳ございません。深くお詫び申し上げます。
――――――――――――――――――――――――――――――

[2021/12/09 19:40更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、筐体側の負荷が改善されたことを確認いたしましたので、
仮復旧とさせていただきます。

引き続き負荷状況の経過観察を継続し、問題が確認できなければ
本復旧のご案内をおこなわせていただく予定です。

――――――――――――――――――――――――――――――

[2021/12/09 17:25更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、経過観察を継続しておりましたところ
誠に恐れ入りますが、再度ストレージ負荷が上昇していることを確認いたしました。

そのため、ステータスを「仮復旧」から「発生中」に変更とさせていただきます。

引き続き対応を実施してまいります。長らくご迷惑をおかけしており
大変申し訳ございません。深くお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/09 15:05更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、現在の状況でございますが、
引き続き経過観察を継続しております。

申し訳ございませんが、本復旧のご案内まで
今しばらくお待ちいただけますよう、謹んでお願い申し上げます。

――――――――――――――――――――――――――――――

[2021/12/08 16:15更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、ホストのCPUについてロードアベレージの負荷が
改善されたことを確認いたしましたので、仮復旧とさせていただきます。

引き続き明日(12/09(木))まで経過観察を継続し、問題が確認できなければ
本復旧のご案内をおこなわせていただく予定です。

なお、一部の仮想サーバー環境では、個別の影響により負荷が高い状況が
継続していることも確認しております。こちらは対象のお客さまへ
個別にご案内させていただきます。

長時間にわたり大変ご迷惑をおかけし、誠に申し訳ございませんでした。
あらためて深くお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/08 15:20更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、長時間におよびご不便をおかけしており
大変申し訳ございません。

現在の状況でございますが、
引き続きスナップショットの削除処理について制限実施後の
経過観察中でございます。

誠に恐れ入りますが、コンソールからの操作はお控えいただいたうえで、
本復旧まで今しばらくお待ちいただけますよう、お願い申し上げます。

※復旧完了までにコンソールから操作を実施いただいた場合
タスクが失敗する可能性が高いものとなります。

ご迷惑をおかけいたしまして、誠に申し訳ございません。
深くお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/08 14:20更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、長時間におよびご不便をおかけしており
大変申し訳ございません。

現在も、スナップショットの削除処理について制限実施後の
経過観察中でございます。

引き続きのお願いとなり恐縮ですが、コンソールからの操作はお控えいただいたうえで、
本復旧まで今しばらくお待ちいただけますよう、お願い申し上げます。

※復旧完了までにコンソールから操作を実施いただいた場合
タスクが失敗する可能性が高いものとなります。

ご迷惑をおかけいたしまして、誠に申し訳ございません。
深くお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/08 13:20更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、長時間におよびご不便をおかけしており
大変申し訳ございません。

現在も、スナップショットの削除処理について制限実施後の
経過観察中でございます。

引き続きのお願いとなり恐縮ですが、コンソールからの操作はお控えいただいたうえで、
本復旧まで今しばらくお待ちいただけますよう、お願い申し上げます。

※復旧完了までにコンソールから操作を実施いただいた場合
タスクが失敗する可能性が高いものとなります。

ご迷惑をおかけいたしまして、誠に申し訳ございません。
深くお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/08 12:41更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、長時間におよびご不便をおかけしており
大変申し訳ございません。

現在も、スナップショットの削除処理について制限実施後の
経過観察中でございますが、多くのお客さまにてコンソールより
操作を実施いただいておりますことから、タスクの滞留や失敗が発生しており
高負荷な状況が発生しております。

再度のご案内となり誠に恐れ入りますが、コンソールからの操作はお控えいただいたうえで、
本復旧まで今しばらくお待ちいただけますよう、お願い申し上げます。

ご迷惑をおかけいたしまして、誠に申し訳ございません。
深くお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/08 11:20更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、長時間におよびご不便をおかけしており
大変申し訳ございません。

現在も、スナップショットの削除処理について制限実施後の
経過観察中でございます。

再度のご案内となり誠に恐れ入りますが、コンソールからの操作はお控えいただいたうえで、
本復旧まで今しばらくお待ちいただけますよう、お願い申し上げます。

ご迷惑をおかけいたしまして、誠に申し訳ございません。
深くお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/08 10:00更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、長時間におよびご不便をおかけしており
大変申し訳ございません。

調査いたしましたところ、昨日実施いたしました内部メンテナンスにて
スナップショット関連のパラメータ変更をおこなった影響により、
スナップショットの削除処理が一気に走ったため、高負荷となっている
状況を確認いたしました。

そのため、スナップショットの削除処理について制限をかける対応を実施し
現在は経過観察中となります。

お客さまには大変ご迷惑をおかけし、誠に申し訳ございませんが、
本復旧まで、今しばらくお待ちいただけますよう、謹んでお願い申し上げます。

――――――――――――――――――――――――――――――

[2021/12/08 05:00更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、長時間におよびご不便をおかけしており
大変申し訳ございません。

現在も引き続き、復旧に向け対応をおこなっておりますが、
復旧完了までには今しばらくお時間を要す見込みとなります。

再度のご案内となり誠に恐れ入りますが、コンソールからの操作はお控えいただいたうえで、
復旧まで今しばらくお待ちいただけますよう、お願い申し上げます。

ご迷惑をおかけいたしまして、誠に申し訳ございません。
深くお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/08 02:00更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、長時間におよびご不便をおかけしており
大変申し訳ございません。

現在も引き続き、復旧に向け対応をおこなっておりますが、
復旧完了までには今しばらくお時間を要す見込みとなります。

コンソールからの操作はお控えいただいたうえで、
復旧まで今しばらくお待ちいただけますよう、お願い申し上げます。

ご迷惑をおかけいたしまして、誠に申し訳ございません。
深くお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/07 23:00更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、長時間におよびご不便をおかけしており
大変申し訳ございません。

引き続き、対応および経過観察を実施しておりますが、
復旧までには今しばらくお時間を要す見込みとなります。

現在もサーバーに接続がいただけない場合は、復旧完了までは
コンソールからの操作はお控えいただいたうえで、
本復旧まで今しばらくお待ちいただけますよう、お願い申し上げます。

ご迷惑をおかけいたしまして、誠に申し訳ございません。
深くお詫び申し上げます。

――――――――――――――――――――――――――――――

[2021/12/07 21:08更新]

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

本件障害につきまして、長時間におよびご不便をおかけしており
大変申し訳ございません。

復旧対応の結果、現在は徐々に負荷が改善してきている状況を確認しております。

引き続き、対応および経過観察を実施してまいりますので、誠に恐れ入りますが
本復旧まで今しばらくお待ちいただけますよう、お願い申し上げます。

ご迷惑をおかけいたしまして、誠に申し訳ございません。
深くお詫び申し上げます。

――――――――――――――――――――――――――――――

お客さま各位

平素はクラウドVPS byGMOをご利用いただき、誠にありがとうございます。

ご提供中のサービスにおいて、下記の不具合が発生しております。
現在は復旧作業中でございます。

■障害発生日時
2021年12月07日(火) 16時46分頃

■障害内容
ホストのCPUについてロードアベレージが急上昇し、高負荷となっており、
すべてのサービスへ接続しづらい状況が発生しております。

誠に恐れ入りますが、復旧まではVPSコンソールからの操作はお控えいただけますよう、
よろしくお願いいたします。

■対象範囲
クラウドVPS byGMOをご利用の一部のお客さま
※VSシリーズは対象外となります。

■原因
調査中

ご迷惑をおかけいたしまして、誠に申し訳ございません。
深くお詫び申し上げます。

ニュース一覧へ