カテゴリー別アーカイブ: 障害情報

【障害復旧】WordPressホスティングのWAF、VPSオプションのWAF(2018/07/24)

平素よりEX-CLOUDをご利用頂きまして誠にありがとうございます。

ご利用頂いております EX-CLOUDのWordPressホスティングでご提供しているWAF、
およびVPSでオプションとして提供しているWAFに障害が出ておりましたが
先ほど復旧いたしました。

■障害発生時間:
2018/07/24 午後1時32分から午後2時ごろ

■影響:
WAF経由で閲覧しているサイトの表示ができない状態となっておりました

■経緯:
EX-CLOUDでオプション提供しているWAFサービスにおきまして、弊社エンジニアがWAFの設定ファイルの修正をおこった際、誤った設定内容を適用してしまい、WAFサービスをご利用いただいている全てのお客様のサイトが閲覧できない状況となりました。

■原因:
弊社WAFは稼動系、待機系の2系統で運用しており、設定変更の際は、待機系から設定変更を行い、動作確認を行った上で稼動系に設定を反映する手順で運用しています。
本件では待機系と稼動系を取り違えて作業が行われたために、誤った設定がそのまま稼動系に反映されてしまい障害が発生してしまいました。

■再発防止策
今後同様の障害を発生させないよう、下記のフロー改善にて再発防止策と致します。
・ログイン時に稼動系、待機系の確認を十分に行う
・設定変更実施前に別のエンジニアにてログイン先のダブルチェックを実施
・本フローを元に作業手順書を改訂

この度は、貴社に多大なご迷惑をお掛けしましたことを重ねてお詫び申し上げます。

【障害復旧】2018/05/11 レンタルサーバーネットワーク障害

平素よりEX-CLOUDをご利用頂きまして誠にありがとうございます。

ご利用頂いております EX-CLOUDサービスのうち、
共用サーバープラン: START FLEX SECURE RS1 Lite Basic Pro
にて疎通が取れない障害が発生いたしました。

■対象サーバー:共用サーバープランの一部
・代表ホスト名
pfve01.~ /pfve02.~ /pfve03.~ /pfve04.~ /pfve05.~ /pfve06.~
pfve07.~ /pfve09.~ /pfve10.~
pive01.~ /pive02.~ /pive03.~ /pive04.~ /pive05.~ /pive06.~ /
pive07.~ /pive09.~ /
rs102.~ /rs103.~ 
>共用サーバーのホスト名を確認する方法
https://ex-cloud.jp/support/question/g-735

※RS2プランをご利用の方(”rs201.~”)と
RS1を“rs01.~”という代表ホスト名で運用いただいているサーバーについては含まれません

■障害発生時間:2018/05/11 午前3時34分 から午前4時36分

■影響範囲:ウェブ、メール、管理画面Pleskへのアクセスなど、疎通が取れない状態になりました

■原因と対応:
対象サーバーのシステムの自動アップデートが行われた際、既存のアクセス制御設定との
不整合が発生し、外部からアクセスができない状態となりました。
エンジニアがシステム調整、およびアクセス制御設定のルールの修復作業を行い
サービスは復旧しました。
その後、管理画面ソフトのメーカー側が提供している再発防止策についても調整を行っております。

また、障害時間中に外部から送信されたメールは送信元メールサーバーの仕様により異なり、
・再配送を行うメールサーバーの場合、メンテナンス後に遅延して配送されます。
・再配送を行わないメールサーバーの場合、送信元のメールアドレスへエラーメールが送信されます。

【障害復旧】2018/03/01 ネットワーク障害

平素よりEX-CLOUDをご利用頂きまして誠にありがとうございます。

ご利用頂いております EX-CLOUDサービスにおいて、
大量のトラフィック流入により、一部区間において輻輳が発生しておりましたが、
現在は回復しております。

本障害により、お客様に多大なるご迷惑をおかけいたしました事、
深くお詫び申し上げます。

■対象サービス:EX-CLOUD提供の全サービス

■障害日時 :
発生 2018年03月01日(木) 03:10頃 (24時間表記)
回復 2018年03月01日(木) 03:25頃 (24時間表記)

■影響内容 :
上記時間帯において、上流ISP間および弊社網内で輻輳が生じ
通信に品質劣化が発生しました。

障害原因 :
DDoS攻撃による大量トラフィック流入

ご迷惑をおかけし申し訳ございませんでした。

【障害復旧】FLEXプラン(***.***.***.42 pive05) 2017/12/27

平素よりEX-CLOUDをご利用頂きまして誠にありがとうございます。

FLEXプランの一部サーバーでウェブ閲覧のできない、メーリングリストサービスに接続できない等の障害が発生しておりました。現在は復旧しております。

▼日時
障害発生時刻:2017年12月27日(水) 午前05時24分ごろ
障害復旧時刻:2017年12月27日(水) 午前10時33分ごろ

▼対象サーバー
2017年12月のシステム移行後の、管理画面のURLが「pive05」で開始しているお客様

上記は「125.6.141.42」がIPアドレスとなっているお客様はすべて含まれます。
(なお専用IPアドレスを購入されている方は、同サーバー内でも
運用中のIPアドレスが異なります。)

>ご利用のサービスホスト名からIPアドレスを確認する方法
https://ex-cloud.jp/support/question/g-725

▼影響範囲:WEBサーバへの接続ができなくなりました。また負荷が高い状態にあったことから、メーリングリストプログラムのMailmanや、メール処理(送信や受信)についても接続しにくいなど、不安定な状況になりました。

▼原因と対応:
サーバー内のメールウィルス対策ソフトウェアに関連して、定期的に起動されるに処理プログラムがあり、当社でそのプログラムファイルの更新を行いました。

あらかじめスケジュールされた日程に、その処理プログラムが起動された後、プログラムが暴走し、サーバーに負荷をかけておりました。

問題となったプログラムが起動したまま、個別に停止することができなかったため、サーバーの再起動を行いました。その後、サービスが復旧しました。

今回の該当サーバーではプログラムファイル自体の破損が確認されていたので、正常なものに上書きをし運用しています。また、このプログラムファイル自体は自動で更新されるものではないため、同問題の再発はございません。

ご迷惑をおかけし申し訳ございませんでした。

【障害復旧】STARTプラン(**.**.**.213) 2017/12/02

平素よりEX-CLOUDをご利用頂きまして誠にありがとうございます。

STARTプランの一部サーバーでウェブ閲覧のできない障害が
発生しておりました。現在は復旧しております。

▼日時
障害発生時刻:2017年12月2日(土) 午前05時05分ごろ
障害復旧時刻:2017年12月2日(土) 午後02時42分ごろ

▼対象サーバー
**.**.**.213がIPアドレスとなっているサーバー
>IPアドレス確認方法
https://ex-cloud.jp/support/question/g-319

▼影響範囲
ウェブ閲覧ができない状況でした。

▼原因と対応:
サーバー負荷の上昇による影響でした。
ウェブサーバーの再起動を行う事により復旧いたしました。

ご迷惑をお掛けしまして、誠に申し訳ございませんでした。

【障害復旧】Lite/Basic/Pro **.**.**.28(2017/11/14)

平素よりEX-CLOUDをご利用頂きまして誠にありがとうございます。

現在 レンタルサーバー Lite/Basic/Pro のサービスにアクセスしにくい障害が発生しておりましたが
復旧いたしました。

▼日時
障害発生時刻:2017年11月14日 09:40頃
障害復旧時刻:2017年11月14日 11:26頃

▼対象サーバー
**.**.**.28がIPアドレスとなっているサーバー
>IPアドレス確認方法
https://ex-cloud.jp/support/question/g-319

▼影響したサービス
ウェブ、メール、コントロールパネルへのアクセス等、各サービスが不安定な状況となりました。

▼原因と対応
特定のウェブサイトのエラーログファイルが肥大化し、
日毎のメンテナンスプロセスが、ログファイルを処理する際に、複数回失敗し、さらにディスクを多く消費しておりました。
また、ディスクおよびサーバーの処理の負担により、サーバー内のウェブ、メールを含むサービスにもスピードの低下や接続失敗が確認できました。

肥大化していたエラーログを削除させていただき、
サーバー領域そのものの再起動作業を行いました。

【障害復旧】Lite/Basic/Proウェブサーバ障害(**.**.**.28) (2017/10/25)

平素よりEX-CLOUDをご利用頂きまして誠にありがとうございます。

現在 レンタルサーバー Lite/Basic/Pro のウェブサイトの設定について
お客様のドメイン名でアクセスすると404エラーのページが表示される事象が発生しておりました。

▼日時
障害発生時刻:2017年10月25日 15:45頃
障害終了時刻:2017年10月25日 16:00頃

▼対象サーバー
**.**.**.28がIPアドレスとなっているサーバー
>IPアドレス確認方法
https://ex-cloud.jp/support/question/g-319

※一部のお客様でIPアドレスを追加で購入いただいているお客様の場合、
上記IPアドレスではない場合があります。
代表ホスト名が「rs103.~」となっているサーバーです。
>共用サーバーのホスト名を確認する方法
https://ex-cloud.jp/support/question/g-735

▼影響範囲
ウェブサイトの表示が404エラー表示となってしまいました

▼原因と対応
サイト監視のアラートメールを受信したので、調査したところ
システム内のデータに不整合が確認できました。
そのためウェブサイトの設定再構築コマンドを発行し復旧しました。

ご迷惑をお掛けしまして、誠に申し訳ございませんでした。

【障害復旧】Lite/Basic/Proメール配送遅延(***.***.***.28) (2017/10/03)

平素よりEX-CLOUDをご利用頂きまして誠にありがとうございます。

現在 レンタルサーバー Lite/Basic/Pro のメールサービスに
アクセスしにくい障害が発生しております。またサーバー内に配送待ちのメッセージが多く滞留しておりました。

▼日時
障害発生時刻:2017年10月3日 15:40頃
障害終了時刻:2017年10月3日 19:50頃

▼対象サーバー
***.***.***.28がIPアドレスとなっているサーバー
>IPアドレス確認方法
https://ex-cloud.jp/support/question/g-319

※一部のお客様でIPアドレスを追加で購入いただいているお客様の場合、
上記IPアドレスではない場合があります。
代表ホスト名が「rs103.~」となっているサーバーです。
>共用サーバーのホスト名を確認する方法
https://ex-cloud.jp/support/question/g-735

▼影響範囲
メールの配送遅延が発生し、同時にメールの接続(送受信)が不安定な状況となりました。

▼原因と対応
特定のご利用者様の一斉メール送信が起因して、サーバー外部へのメール送信が滞留し、過負荷となりました。
原因となったお客様については利用規約に沿って対応をさせていただいております。

ご迷惑をお掛けしまして、誠に申し訳ございませんでした。

【障害復旧】STARTプラン(***.***.***.170、***.***.***.213) 2017/09/22

平素よりEX-CLOUDをご利用頂きまして誠にありがとうございます。

現在STARTプランの一部のサーバーにアクセスしにくい障害が
発生しておりました。現在復旧しております。

▼日時
障害発生時刻:2017年9月22日(金) 8時10分ごろから9時51分

▼対象サーバー
***.***.***.170、***.***.***.213がIPアドレスとなっているサーバー
>IPアドレス確認方法
https://ex-cloud.jp/support/question/g-319

▼影響範囲
サービス全般(ウェブ、メール、コントロールパネル)に接続しづらい状況でした。

▼原因と対応:
一時的な負荷上昇のため、一部のプロセスが停止され、
通常時のように処理を進められず、サーバー全体が重くなっておりましました。
プロセスの再起動により復旧いたしました

ご迷惑をお掛けしまして、誠に申し訳ございません。

【障害復旧】バックボーン設備メンテナンス完了のご報告(2017/09/12)

平素よりEX-CLOUDをご利用頂き誠にありがとうございます。

本日、弊社バックボーン設備の保守作業(メンテナンス)が行われました。

このメンテナンスについてはお客様に提供しているサービス上での通信に影響はないため、
告知を行っていないものとなっておりましたが、以下内容にて、作業に伴う通信品質の
劣化が発生いたしました。

本影響につきまして、ご利用のお客様には多大なるご迷惑をお掛けいたしました事、
深くお詫び申し上げます。

▼メンテナンス日時
2017年09月12日(火) 01:00 – 07:00 (24時間表記)

▼作業内容
弊社バックボーン設備のソフトウェア更新、及び帯域増強作業

▼影響内容
保守作業前後のトラフィックの迂回措置により、
お客様通信への影響はない予定でございましたが、
迂回操作における実行順序の誤りにより、
下記時間帯の一部インターネット間通信が不安定になる事象が発生いたしました。

<影響日時>
2017年09月12日(火) 05:55 – 06:10頃 (24時間表記)

この度はご迷惑をお掛けし、申し訳ございませんでした。