2009年9月30日(水)に発生しました岡三ネットトレーダー処理遅延の原因および対策についてのご報告(最終)

2009年10月23日
岡三オンライン証券株式会社

平素より岡三オンライン証券をご利用いただきまして、誠にありがとうございます。

2009年9月30日(水)前場寄付直後に発生しました処理遅延につきましては、お客様に大変ご迷惑をおかけしたことをあらためましてお詫び申しあげます。
すでに抜本的対策の完了による正常稼働が確認されていることから、9月30日の処理遅延の原因および対策につきまして、本日、最終報告をさせていただきます。

9月30日寄付直後、データセンター内の株価配信サーバーと岡三ネットトレーダーサーバー間の通信で大量の電文ロスト(抜け)が断続的に発生し、これを受けて岡三ネットトレーダーサーバーは電文の再取得処理に入るとともに運用サーバーへの障害通知処理を実施いたしました。

これら一連の障害対応自動リカバリ処理は30分程度継続して稼働いたしましたが、この結果、CPUが高負荷状態となり本来優先して処理されなくてはいけないお客様からの注文や各種照会等の処理が全般的にスローダウンいたしました。

調査の結果、電文ロスト処理が発生した理由は株価配信サーバーと岡三ネットトレーダー間のネットワーク機器(L2スウィッチ)のハードウェア接触不具合であると判明いたしました。

抜本的な対策として、以下の対応を実施しております。

①9月30日夜間において、当該ネットワーク機器でリブート(電源OFF/ON)を実施し、バックアップ機器をメインとする設定に変更
②10月1日(日)、バックアップ機器のハードウェア交換

また、9月30日ご報告のとおり、今回同様の事象が発生した場合の緊急対応として、
①ログ情報の収集方式の変更
②ログ送信プロセスの上限設定変更
もあわせて実施いたしました。

お客様には大変ご迷惑をお掛けいたしましたことを重ねて深くお詫び申しあげます。

お知らせ一覧に戻る