ポストモーテム みずほ銀行システム障害 事後検証報告

日経コンピュータ

なぜ繰り返すのか、メガバンクの失敗に学ぶ

みずほ銀行で2021年2月からの12カ月間に11回ものシステム障害が発生した。
2002年、2011年と大規模システム障害を起こし、それを反省して2019年までに勘定系システムを全面刷新したみずほ銀行だったが、トラブルは繰り返された。

システム障害はなぜ起きたのか。みずほ銀行ではなぜシステム障害が繰り返されるのか。
情報システムは人が開発・運用するものでトラブルは避けられないのだから、情報システムを利用する組織には、システム障害が起きても顧客や業務に影響を与えないで済ませられるレジリエンシー(復元性)が必要だ。

情報システムの専門誌「日経コンピュータ」が執筆する本書は、みずほ銀行の失敗を教訓に、組織のレジリエンシーを高めるための方策を探る。

• カテゴリ: ビジネス・実用
• ジャンル: IT・コンピュータ / 全般
• 出版社: 日経BP
• ページ数: 312ページ
• 電子版発売日: 2022年03月18日
• コンテンツ形式: EPUB
• サイズ(目安): 25MB

[ブクログ · ★★★★★]

ITインフラの保守、運用に関わる者としてゾッとする話でしたが、非常にためになりました。
前に読んだ「みずほ銀行システム統合　苦闘の19年史」よりも、障害内容に対する考察（なぜなぜ）が深い。

[ブクログ · ★★★★★]

2021/2-2022/2の11回にわたるシステム障害について書かれている。

面白かったのは2・4・5章（≒障害発生回数）。

事実が書かれていることと、内部精通者がいるのか？というくらいに詳しく書かれていて面白い。

銀行システムを担当するエンジニアは全員読んだほうが良い良書。逆に、銀行システムを担当していても、システムを触ったことがない担当者だと、描いてある内容でわからない部分は多いような気がする。

[ブクログ · ★★★★★]

前作でシリーズ完結っぽかったところ、新展開でまた新作が読めた。「気付かなかった」「見落とした」が何回出てくるのか、という所が個人的には今回ツボった。MINORIの各部の健康状態をリアルタイムでインフォグラフィクス化して公開、とかすると良いんじゃないかと思った。HDDの弾が死んで黄色になって、4時間後には交換して緑に戻って、みたいなの、インフラ屋はやるけど、世間の人、知らんだろうし。僕は、割と大きいシステムをベンダから引き継いだ時、それまで引き渡す立場だったので、これはブラックボックスで掌握感がないって感じて、それが後にLC4RIに繋がったりしてる。そこを運用現場がどう感じてたのか気になるかな。これは所与で改善できませんとかだったら、まあ仕事楽しくないよね。

[ブクログ · ★★★★★]

最近の仕事で、みずほ総研（MHIR）の方と一緒に働いているのですが。
有名なみずほFGの各障害が詳細に記載されていて
その原因追及や、根本原因などの分析が秀逸
SEとして読んでいて、よく理解できて、
身につまされる内容。
さらに、今の関連しているPJTと悪い部分が非常に
よく似ている。
今回のPJTでも、なんなりの障害は発生しそうである。
関連者に読んでほしいと思われます。

[ブクログ · ★★★★★]

ー　金融庁はこうしたシステム上やガバナンス上の問題点が発生する「真因」として、「①システムに係るリスクと専門性の軽視」「② IT現場の実態軽視」「③顧客影響に対する感度の欠如、営業現場の実態軽視」「④言うべきことを言わない、言われたことだけしかしない姿勢」があると指摘する。

この中でひときわ目を引くのは「④言うべきことを言わない、言われたことだけしかしない姿勢」だ。金融庁は具体的な例を2つ挙げている。1つはみずほ銀行でシステム障害が発生した際、経営トップが障害の第一報を受けても、具体的な指示を出さなかったことが問題だとした。もう1つはみずほFGの取締役会でシステム障害について提言や意見が述べられても、執行部門がそうした提言や意見に基づいて具体的な行動をとらなかったことが問題だとした。　ー

なぜ、12ヶ月で11回のシステム障害が発生したのか。原因、背景、真因を徹底的に検証した作品。

15個の「なぜ」とか、読んでいて止まらない面白さ。知的興奮を呼び起こす作品。

[さとかず · ★★★★★]

今回も面白かった

企業が起こした障害とその復旧対応そして再発防止の話は非常に面白く参考になります。本にしてくれて有り難いです

[ブクログ · ★★★★★]

良書。読み終えたとき、銀行の勘定系システムを知るには、うってつけのテキストと感じました。情報システムの関係者へ向けたメッセージです。

表題のポストモーテムとは、事後検証報告書（直訳は、検視、死体解剖）、要は事後の振り返りです。

コンピュータの仕組みを知らない方は、読み進むのは、難しいかもしれないが、かじったことのある方であれば、IT用語のほうは、苦にはならないのではないか。むしろ、金融関連の用語を知らないと進みずらいではと感じました。
流れは、第３章で１５の疑問、第４章でなぜ重大障害が頻発したかの結論に至ります。振り返りとはここまで。また再発防止策について、７章にまとめられています。

金融庁からの指摘・原因
①システムを開発したのはいいが、品質を確保するために十分なテストをしなかった。
②稼働させた後に保守体制を十分に整備しなかった。（保守要員を１／３にカットした）
③障害に備えて、十分に訓練しなかった。

筆者は上記に加えて、他行が１社に片寄せした勘定系システムを、いがみあう４社に分散した結果、十分なコミュニケーションがとられないままに、システムがリリースされて障害が多発したと指摘しています．２度のシステム合併は各ベンダーに禍根を残したとも指摘しています。IBM 日立 富士通 NTTデータ

三菱ＵＦＪ　3300億円
三井住友　　1000億円
みずほ　　　8000憶円（4000億はDKB,FKBの片寄せ、4000億は3みずほの再構築）

上記がメガバンクの、合併にともなうシステム統合の費用です。
みずほは、多額の投資を取り戻そうと、運用費用をけずって、好決算をたたき出したのに、障害を引き起こして信用を失うという結果につながっています

また、三菱ＵＦＪとほぼ同規模だったみずほですが、４つのベンダーをたばねるために倍以上のコストがかかっています。「みえる化」というか、わかりやすさが、情報システムの構築コストにいかに大切かがうかがいしれます。

筆者のおもいというか結論は、以下です。

「ポストモーテム」は、失敗からの学びを大切にする文化の代表例だ。本書が多くの読者にとって、みずほ銀行の失敗を学び、より良い情報システムを築き上げるための教訓とする過程の一助になることを願っている

貴重な資料

P48　銀行システムの主な要素と勘定系システムの位置づけ
P50 勘定系システム「MINORI」の全体像とシステム障害が発生した箇所
P51 MINORIの主要機能と担当ベンダー
P129 MINORIの監視体制
P158 データベース冗長化対策の手法
P163 MINORI関連システム概要（インフラ基盤構成）
P185 大手銀行の勘定系システムの変遷
P195 銀行オンラインシステムの歴史
P212 みずほ情報総研の委託先体制
P217 メガバンクのシステム統合プロジェクトの比較
P233 MINORI稼働後に開発を始めたＡＰＩゲートウェイ
他　第7章　各再発防止策が集約されています

目次は以下です。

はじめに
第１章　前代未聞、１２か月で１１回のシステム障害
第２章　行内で何が起きたのか、システム障害の真相
第３章　なぜ障害は拡大した、１５個の疑問
第４章　金融庁が分析する「原因」「背景」「真因」
第５章　障害を繰り返すみずほ銀行のシステム、その歴史を紐解く
第６章　なぜみずほ銀行でだけ、何度も障害が起きるのか
第７章　みずほ銀行は立ち直れるのか
おわりに

[ブクログ · ★★★★★]

良書。前作よりも専門的な説明に踏み込んでおり、詳しい人によりわかりやすくなっている。慣れない人でも、うまくその後の説明で補足を入れてるので、たいへん気を使って書かれた本だなという印象である。
現場のエンジニア、特に運用寄りのエンジニアは読むのが良いと思う。ただ、夜寝る前に読むのはお勧めしないけれど。

[ブクログ · ★★★★★]

システム開発に携わる立場から見ると、要件定義やプロジェクト進行のみならず、リリース後の監視・運用保守体制がいかに重要であるか痛いほど伝わる事例集となっていた。

システム障害の事後検証報告ということもあり、IT業界の人間でなければ文中に出てくる用語や仕組みの理解を深めるのは難しいものと思われる。

しかしながら、本書では障害発生時における顧客対応・危機管理面において、みずほ銀行の組織態勢不備が大きな課題として挙げられている点にも注目したい。

「積極的に声を上げることでかえって責任問題となるリスクをとるよりも、自らの持ち場でやれることをやっていたといえるための行動をとる方が、組織内の行動として合理的な選択になってしまう」（システム障害特別調査委員会の調査報告書より）

このような悪しき企業風土は、一定の規模感をもった組織であれば、どこでも発生しうる可能性は多分にあるだろう。日頃から部署間の連携やコミュニケーションをスムーズに行える体制づくりをすべきだということを、改めて思い知らされた一冊である。

失敗から学ぶ文化の醸成は、もはやどの組織でも必要不可欠な要素となっている。本ポストモーテムの知見が広く共有されることで、自らシステムの課題発見や解決方法の模索ができる人材がひとりでも多く育成されることを願っている。

[ブクログ · ★★★★☆]

みずほ銀行の一連の障害についてとてもわかりやすく纏められている本。自分の職業柄、涙と冷や汗なくしては読み通せなかった……
特に2022年2月の大障害（ATMにカードが吸い込まれ続けたやつ）については、事前の開発時にも運用手順でもたくさんの「たら、れば（防げたのに）」網があったのに、全て突破してしまった結果なんだなと。人の振り見て我が振り直せ。