IT、ガジェットネタまとめ速報

IT技術やガジェットネタに関するみんなの反応のまとめをチョイスしてお届け!

Web系関連記事: プログラミング、開発関連

Oracle DBの「非公開バグ」が表面化、大阪市基幹システム障害の真相

投稿日:

1: 田杉山脈 ★ 2019/07/05(金) 21:19:01.46 _USER
topm
大阪市で住民票などの証明書発行業務を担う基幹システムが停止。復旧まで21時間を要し、8000件近い証明書発行業務に影響が及んだ。原因はOracle Databaseのクラスタ機能に潜むバグだった。ネットワークの不調をきっかけにシステムが停止し、再起動もできなくなった。米オラクルはバグの存在を把握しながら対外開示をしていなかったとみられる。

 2019年6月7日午後0時5分頃。大阪市内の24の区役所や出張所、梅田・難波・天王寺のサービスカウンターで、住民票の写しや記載事項証明書、国民健康保険や税務関連の証明書などが印刷できなくなった。金曜日の昼休みということもあり、週内に書類を発行してもらおうと区役所など窓口に来ていた住民からは悲鳴と怒号が上がった。

同じ頃、大阪市西区の阿波座にある大阪市ICT戦略室も騒然としていた。システム障害を知らせる警報が鳴り、各区役所からトラブル発生を知らせる電話が相次いだ。「統合基盤システムが停止しました。確認してもらえますか」。ICT戦略室の担当者はシステムの開発元で保守契約も交わしているNTTデータ関西の担当者を呼び寄せた。同社はNTTデータの地域子会社だ。

 統合基盤システムは大阪市の基幹システムだ。住民基本台帳、税務、福祉、国民健康保険、介護保険という住民情報系の5システムと連携し、各システムへのログイン時のユーザー(職員)認証や各システムから受け取った証明書データなどの印刷をつかさどる。2015年1月に運用を始めた。「住民情報系5システムに共通して必要となる機能を統合基盤システムに切り出すことでコスト削減を図った」(ICT戦略室)。システムはアプリケーションサーバーと、職員の認証情報や印刷用データなどを管理するデータベースサーバー、それらのデータを蓄積する共有ストレージなどから成る。

 データベース管理システム(DBMS)は米オラクルの「Oracle Database」を採用している。バージョンは「システム構成に関わるので明らかにできない」(大阪市ICT戦略室)。負荷分散と障害回避を目的に同製品のクラスタ機能「Oracle Real Application Clusters(Oracle RAC)を使い、2ノードをActive/Active構成で並行稼働させている。片方が止まってもサービスを継続できるようにしていたが、今回は「2ノードがほぼ同時に停止した」(同)。アプリケーションサーバーは稼働していたものの、ユーザー認証や印刷データの格納に不可欠なDBMSが停止した。これによって「統合基盤システムのほぼ全てが使えなくなった」(同)。

 NTTデータ関西の保守担当者はDBMSが停止している事態を把握し再起動を試みた。しかし2ノードとも再起動できない状態が続いた。このためNTTデータ関西は日本オラクルなどと連絡を取りつつ原因究明を開始。その結果、午後3時30分頃にDBMSのシステムファイルが破損している事実を特定した。

 破損していたシステムファイルはOracle RACを構成する各ノードがそれぞれの死活状況を共有ストレージに書き込む「投票ディスク」である。この内容が異常なデータになっていたという。「投票ディスクを参照した2つのノードが共に異常を検知して、それぞれ自身でDBMSとしての機能を停止させた」(大阪市ICT戦略室)。保守担当者が再起動を試みてもできなかったのは、各ノードが再起動の過程で投票ディスクの内容を参照するようになっていたからだ。投票ディスクの異常値を検知して停止してしまった。
https://tech.nikkeibp.co.jp/atcl/nxt/mag/nc/18/020600011/070200035/
引用元: http://egg.5ch.net/test/read.cgi/bizplus/1562329141/


続きを読む


【期間限定】失敗しないためのカリビアンコム3日間無料キャンペーン情報まとめ

このまとめの続きはコチラ!

-Web系関連記事: プログラミング、開発関連

関連記事

厚労省「すいません、COBOL分かる人間が少なくて勤労統計調査のチェック甘かったです」

1: 名無しさん@涙目です。(愛知県) [DE] 2019/01/23(水) 19:12:31.69 ● BE:218927532-PLT(13121)
厚生労働省の毎月勤労統計調査についての特別監察委員会の報告書が出され、委員長の記者会見が行われた。 疑問も残るが、おおむね事実関係は明らかになった。焦点になっ…

AI投信、苦戦目立つ 「新局面」対応に課題

1: 田杉山脈 ★ 2019/08/03(土) 14:15:44.69 _USER
人工知能(AI)を投資判断に活用し、有望銘柄を探そうとする投資信託が増えてきた。高収益を期待した個人投資家の資金を集めたが、足元の成績はいまひとつだ。なぜなのか。 日興リサーチセンターが、AIを投資判断に活…

「自分の生き方」がない人はAIに仕事を奪われる

1: 田杉山脈 ★ 2020/01/13(月) 21:13:51.56 _USER
これまで人間にしかできないとされてきた仕事が、AI(人工知能)に奪われる。巷ではそんな不安の声が聞こえる。果たして本当なのだろうか。 「AIが人の能力を超え、我々の生活を一変させる『シンギュラリティ』へ到達…

「メモ帳」がLinuxの改行コードをサポート

1: ノチラ ★ 2018/05/09(水) 23:51:08.97 _USER
 Microsoftの開発者向けイベント“Build 2018”が米国シアトルにて開催中で、今日は2日目のキーノートセッションが行われていました。新しい機械学習技術やクロスデバイス体験などがお披露目されましたが、なかでも会場を…

京都市が基幹系刷新で2度目の失敗、2020年1月の予定だった稼働時期が「未定」に

1: サーバル ★ 2019/12/28(土) 20:57:49.75
京都市が基幹系刷新で2度目の失敗、2020年1月の予定だった稼働時期が「未定」に 2019/12/27 18:30  京都市はNEC製メインフレーム上で約30年稼働する基幹系システムのバッチ処理をオープンシステムに刷新するプロジェクトに…