21/10/10(日)10:35:23 >みずほ... のスレッド詳細
削除依頼やバグ報告は メールフォーム にお願いします。個人情報、名誉毀損、侵害等については積極的に削除しますので、 メールフォーム より該当URLをご連絡いただけると助かります。
画像ファイル名:1633829723315.jpg 21/10/10(日)10:35:23 No.854795098
>みずほ銀行は8月から先月まで4回発生したシステムなどの障害について、ハードディスクの経年劣化などが原因だったと公表しました。 https://news.tv-asahi.co.jp/news_economy/articles/000231407.html
1 21/10/10(日)10:36:27 No.854795414
HDDに責任を押し付けるな
2 21/10/10(日)10:37:21 No.854795674
ディスクが劣化するのなんで普通のことなのになんでそれが原因みたいになってんの
3 <a href="mailto:HDD">21/10/10(日)10:37:45</a> [HDD] No.854795781
えっ!?オレ!?
4 21/10/10(日)10:38:23 No.854795954
この際、バックアップシステムに切り替えようとしましたが、入力すべき追加の指示を飛ばしたため失敗しました。 原因はこれでは?
5 21/10/10(日)10:38:56 No.854796157
HDD壊れただけで副系に切り替えるの?どういう運用?リスクしかなくない?
6 21/10/10(日)10:39:07 No.854796230
ああ落としどころの探り合いってやつですねまっ大人の事情ってもんですね
7 21/10/10(日)10:39:18 No.854796288
すみません当時これ作ったやつとすぐ連絡取れるようにします…
8 21/10/10(日)10:40:06 No.854796527
大企業なんだからハードディスクくらい早く交換してあげてほしい
9 21/10/10(日)10:40:45 No.854796815
そういうことにしといたるわ的な
10 21/10/10(日)10:40:48 No.854796832
こういうのって予備HDD在庫しといて即交換する運用じゃないのか…いちいち予備の系統に切り替えるの?
11 21/10/10(日)10:40:49 No.854796839
当時のエンジニアに責任押し付ける気マンマン
12 21/10/10(日)10:41:32 No.854797060
ちょっと待てよ!?
13 21/10/10(日)10:41:34 No.854797069
知り合いのSEが喜んでたよ 金かけるのにシブい上の連中が最近は「放置しておくとみずほみたいになりますよ」と言えば動くからありがたいって
14 21/10/10(日)10:44:31 No.854797995
いやー問題も判明して終わった終わった
15 21/10/10(日)10:44:35 No.854798013
>この際、バックアップシステムに切り替えようとしましたが、入力すべき追加の指示を飛ばしたため失敗しました。 > >原因はこれでは? そうだね みずほも「」もなぜかハードディスクがハードディスクがって言うけど切り替え手順が整備されてなかったことの方が問題
16 21/10/10(日)10:46:05 No.854798493
言い訳にしてもなんで一番やっちゃいけないレベルのものを
17 21/10/10(日)10:47:14 No.854798855
これでまた障害起きたら次の言い訳どうすんの
18 21/10/10(日)10:47:23 No.854798892
障害確率は4000年に一度とか言ってた記事見たけどどういう計算でその結論に至ったのか教えてほしい
19 21/10/10(日)10:47:43 No.854799013
何に使ってるかわかんないからどう切り換えていいかわかんなかった
20 21/10/10(日)10:47:54 No.854799099
>すみません当時これ作ったやつとすぐ連絡取れるようにします… 無関係ゾーン おあしす 無関係ゾーン
21 21/10/10(日)10:48:56 No.854799472
>障害確率は4000年に一度とか言ってた記事見たけどどういう計算でその結論に至ったのか教えてほしい 同じDC内でのシステムの冗長化 さらにDC自体を別の拠点にする冗長化で全てが同時に故障する確率がそれくらいって話
22 21/10/10(日)10:49:20 No.854799601
うちアプリ屋なのに電話かかってきたから本当に原因究明大変だったんだろうなって思うよ
23 21/10/10(日)10:49:26 No.854799646
>8月23日や先月8日に100台以上のATMが一時停止したケースではネットワーク機器に静電気などが生じエラーが発生した可能性が高いということです。 こっちも大概だな
24 21/10/10(日)10:49:35 No.854799703
>障害確率は4000年に一度とか言ってた記事見たけどどういう計算でその結論に至ったのか教えてほしい 全部一気に本当に何もできなくなるほど逝ってどうしようもなくなる確率はそれくらいって話なのでは
25 21/10/10(日)10:49:38 No.854799723
>障害確率は4000年に一度とか言ってた記事見たけどどういう計算でその結論に至ったのか教えてほしい 適切な運用が行われた上での計算だからですかね…
26 21/10/10(日)10:49:56 No.854799864
みずほは悪くないのでベンダーを指導します
27 21/10/10(日)10:50:00 No.854799887
>さらにDC自体を別の拠点にする冗長化で全てが同時に故障する確率がそれくらいって話 使う人間の無能さを考慮に入れてなかったっていうオチ
28 21/10/10(日)10:50:19 No.854799994
>こういうのって予備HDD在庫しといて即交換する運用じゃないのか…いちいち予備の系統に切り替えるの? 主要データは外部ストレージ装置に持っててサーバ本体はHDD2台構成とかはまあよくある その場合はサーバを複数台で冗長化して対策するんだけど切り替えをまともに出来てないんじゃそりゃ止まるわ…
29 21/10/10(日)10:50:21 No.854800009
よくわからんけど金融系のシステムなら末端のネットワーク機器ですらきっちり冗長化してそうなのにそんな簡単に経路不全なるかね…
30 21/10/10(日)10:51:23 No.854800349
管理能力ないでーすって言うようなもんでは
31 21/10/10(日)10:51:37 No.854800433
>みずほも「」もなぜかハードディスクがハードディスクがって言うけど切り替え手順が整備されてなかったことの方が問題 手順の問題にしてしまうと誰かが責任を取らないといけないんだ たまたまHDDが壊れたといえば想定外の事態?だから誰も責を負わなくて済むんだ やさしいせかいなんだ
32 21/10/10(日)10:52:12 No.854800642
戦犯はHDDでした おわり
33 21/10/10(日)10:52:14 No.854800650
手順に載ってない 想定してない お あ し す
34 21/10/10(日)10:52:29 No.854800731
Q.失敗したらどうするのか A.失敗しない
35 21/10/10(日)10:52:53 No.854800864
心臓と肝臓と腎臓と肺と脳とその他諸々が同時に止まる可能性は4000年に1回です!
36 21/10/10(日)10:53:07 No.854800985
大半の一般人は理由分りましたって言えば納得するから問題ない
37 21/10/10(日)10:53:08 No.854800995
つまりみずほとMINORIは4千年前から存在していたんだよっ!!
38 21/10/10(日)10:53:12 No.854801019
切り替えの手順書がシステム構築した当時の古いままで違法増築した後の手順書はなかった(前の担当の頭の中にしかない) 現地で対応したエンジニアが手順通りにやって失敗したorフェールストップできなかった こんなところだろうか
39 21/10/10(日)10:53:29 No.854801105
にゃーん
40 21/10/10(日)10:53:35 No.854801143
これで言い訳になると思ってる連中の頭脳がまずヤバイ
41 21/10/10(日)10:53:39 No.854801158
言い訳すらもダメだこいつらってちゃんと分からせてくれるから躊躇なく見限れるな
42 21/10/10(日)10:54:03 No.854801279
https://archive.is/lV34b 1. 多摩主DBのHDDが同時に複数壊れる 2. 多摩副DBへの切り替えコマンドをうっかり飛ばす 3. 千葉主DBは多摩主DBの影響を受けて止まってた 4. 富士通から言われてとりあえずHDDを抜き差ししてみるが失敗 5. 千葉副DBは生きていたので移行を検討する 6. 千葉DCは災害対策用なのでシステムごと移行するマニュアルしかない 7. みずほは夜の2時半、富士通にDBだけ移行する手順書を作らせる 8. その手順書でDBだけ千葉副DBに移行して復帰 9. でも千葉DCは本来災害対策用なので多摩DCに切り戻さないといけない 10. どうしよう
43 21/10/10(日)10:54:14 No.854801331
>Q.失敗したらどうするのか >A.やる前に失敗すること考えるバカいるかよ!
44 21/10/10(日)10:54:16 No.854801341
切り替えが安全にできないって結構やばくない?
45 <a href="mailto:金融庁">21/10/10(日)10:54:24</a> [金融庁] No.854801387
奴は四天王の中でも最弱…
46 21/10/10(日)10:54:24 No.854801388
仮にみずほが破綻したらどうなるんだろう 流石にそこまではならないか
47 21/10/10(日)10:54:26 No.854801397
>切り替えの手順書がシステム構築した当時の古いままで違法増築した後の手順書はなかった(前の担当の頭の中にしかない) 前の担当だって自分が触ったところしかしらないから手順なんてわからないと思うヨ
48 21/10/10(日)10:54:39 No.854801460
障害予兆ログとかを誰も知らんからヨシしてたんだろう
49 21/10/10(日)10:55:30 No.854801708
>4. 富士通から言われてとりあえずHDDを抜き差ししてみるが失敗 この時点でキンタマが縮む
50 21/10/10(日)10:55:35 No.854801729
じゃあHDD交換したら直るってことね
51 21/10/10(日)10:55:38 No.854801745
>https://archive.is/lV34b >1. 多摩主DBのHDDが同時に複数壊れる >2. 多摩副DBへの切り替えコマンドをうっかり飛ばす >3. 千葉主DBは多摩主DBの影響を受けて止まってた >4. 富士通から言われてとりあえずHDDを抜き差ししてみるが失敗 >5. 千葉副DBは生きていたので移行を検討する >6. 千葉DCは災害対策用なのでシステムごと移行するマニュアルしかない >7. みずほは夜の2時半、富士通にDBだけ移行する手順書を作らせる >8. その手順書でDBだけ千葉副DBに移行して復帰 >9. でも千葉DCは本来災害対策用なので多摩DCに切り戻さないといけない >10. どうしよう 4の時点で怖すぎるわ 強制オンラインってやっちゃダメだろ…
52 21/10/10(日)10:55:43 No.854801764
何とかしてHDDとエンジニアのせいに出来ませんか?
53 21/10/10(日)10:55:53 No.854801829
ふじつうかわうそ
54 21/10/10(日)10:55:59 No.854801861
>これで言い訳になると思ってる連中の頭脳がまずヤバイ 言い訳になるわけないんだがなるんだなこれが まさにモラルハザード
55 21/10/10(日)10:56:04 No.854801883
SEは他の部署に異動させていたってのもわかっているから保守できるわけがないだけなんだ
56 21/10/10(日)10:56:09 No.854801908
4000年に一度しか壊れないって言ってたんですけど!
57 21/10/10(日)10:56:20 No.854801960
富士通さんHDD抜き差し指示って激ヤバでは… まぁログ取った上での判断なんだろうけど
58 21/10/10(日)10:56:34 No.854802031
ハードディスクが単一障害点みたいな説明だね
59 21/10/10(日)10:56:41 No.854802075
とりあえずHDDを抜き差しするな
60 21/10/10(日)10:56:42 No.854802080
>7. みずほは夜の2時半、富士通にDBだけ移行する手順書を作らせる ここすごいかわいそう
61 21/10/10(日)10:56:56 No.854802153
>みずほは「システム会社から、(二重の)故障が起きる確率は4000年に1度と説明された」と強調した。ただ、同じ型番の機器で故障率は今年度2倍に増えているデータがあったが、みずほは故障の予兆としてとらえていなかった。 讀賣の記事だけどこれはダメじゃん!
62 21/10/10(日)10:57:06 No.854802213
>すみません当時これ作ったやつとすぐ連絡取れるようにします… そういう風に作ることを承認した人間がサービス提供側に残ってないとマズいのでは?
63 21/10/10(日)10:57:17 No.854802280
>1. 多摩主DBのHDDが同時に複数壊れる RAIDなのに何で定期交換してないんだよ…
64 21/10/10(日)10:57:24 No.854802314
>4000年に一度しか壊れないって言ってたんですけど! その一度が6年目にして出たんだ 残り3994年は安泰なんだ
65 21/10/10(日)10:57:37 No.854802395
というか切り替え手動なの?
66 21/10/10(日)10:57:38 No.854802400
金融庁はみずほをどうするつもりなんだ
67 21/10/10(日)10:57:41 No.854802418
>すみません当時これ作ったやつとすぐ連絡取れるようにします… 絶対協力しねえだろこれ
68 21/10/10(日)10:57:42 No.854802426
>RAIDなのに何で定期交換してないんだよ… 定期交換しても運が悪ければHDDが同時に死ぬこともあるし…
69 21/10/10(日)10:57:46 No.854802441
>そういう風に作ることを承認した人間がサービス提供側に残ってないとマズいのでは? 請負か委任か…
70 21/10/10(日)10:58:49 No.854802740
2番のうっかりさんは本当にうっかりさん
71 21/10/10(日)10:58:59 No.854802797
みずほは別に悪くないというかただの被害者 システム構築を請け負った富士通がダメだっただけに見える
72 21/10/10(日)10:59:04 No.854802818
ちなみに俺のNASでもHDDが1台死んだくらいじゃ落ちない構成になってるし 予算の都合で載せてない予備HDDを用意できれば即死んだHDDを切り離して予備への代替作業が始まるくらいにはHDDの冗長化は簡単
73 21/10/10(日)10:59:17 No.854802879
みずほ銀行ってお金沢山あるんじゃないの? なんかケチってない?
74 21/10/10(日)10:59:27 No.854802921
ストレージだかノードだか知らんけどfailしたディスクの抜き差しとかやっちゃダメだろ…下手したらデータロストですよ
75 21/10/10(日)10:59:47 No.854803010
みずほのATMから出てくる人を見かけた あ、いるんだなーというのとご愁傷さまですという気持ち
76 21/10/10(日)11:00:07 No.854803078
ごめんHDDが同時に壊れたは間違いで 1台壊れてリビルド中にもう1台壊れた >みずほ銀行が銀行法に基づく報告徴求命令を受けて金融庁に提出した報告書などによると、システム障害の発端は8月19日午後7時40分、業務チャネル統合基盤のデータベース(DB)サーバーのディスク装置が1台故障したことだった。 >DBサーバーのディスクはミラーリングしてあるので、すぐにミラーディスクに切り替わった。また新しいミラーディスクを作るために、スペアディスクへのデータコピーも始まった。しかし午後8時52分、ミラーディスクも故障してしまう。まだスペアディスクへのデータコピーは完了していなかったため、ディスクからデータを読み出せなくなり、DBサーバーが停止した。
77 21/10/10(日)11:00:23 No.854803149
>みずほは別に悪くないというかただの被害者 >システム構築を請け負った富士通がダメだっただけに見える この有識者様の意見通りならなんで富士通は一切名前出てこないんですか
78 21/10/10(日)11:00:34 No.854803193
ディスクが複数故障って内部にスペアはないの? …でもここの運用はスペアに切り替わった後も交換せずそのまま走らせててさらに壊れてデグレードしたとこでようやく対応したみたいなやつなんだろうな
79 21/10/10(日)11:00:38 No.854803212
>みずほは別に悪くないというかただの被害者 >システム構築を請け負った富士通がダメだっただけに見える うちのシステムも未完成かってぐらい使いにくいし不具合があるし…
80 21/10/10(日)11:00:44 No.854803235
>https://archive.is/lV34b >1. 多摩主DBのHDDが同時に複数壊れる >2. 多摩副DBへの切り替えコマンドをうっかり飛ばす セカンダリの切り替え失敗してる時点で運用レベル的にも終わってる…てかそれくらいクラスタソフトで自動化しときなさいよ
81 21/10/10(日)11:01:10 No.854803372
そんな低確率な事象引いちゃったのか…
82 21/10/10(日)11:01:13 No.854803382
>RAIDなのに何で定期交換してないんだよ… 導入時期が同じなら同時にイクのあるある案件だよね
83 21/10/10(日)11:01:42 No.854803510
このレベルのプロジェクトだと実際作ってるの7次受けとか8次受けだろ そんな奴ら連絡つけるように出来るの?
84 21/10/10(日)11:01:48 No.854803539
富士通じゃしょうがない…
85 21/10/10(日)11:01:58 No.854803580
この前スレ立ってた月給最大130万の求人ってコレ?
86 21/10/10(日)11:02:11 No.854803629
ミラーリングしてるって文章がわからんけどDBサーバ自体の内蔵ストレージがRAID1なの?リビルド中にもう1本もこけました!データロスト!
87 21/10/10(日)11:02:46 No.854803785
そもそもなんでデータセンターが多摩と千葉なんだよ 関東に巨大地震が来たら詰むだろ 東日本と西日本で分けたりしないの?
88 21/10/10(日)11:02:59 No.854803846
DBサーバの耐障害性が低すぎる…最低でもRAID6のスタック構成だろ
89 21/10/10(日)11:03:11 No.854803904
そもそも設計以前の段階でコケてるじゃないですかここ
90 21/10/10(日)11:03:12 No.854803906
社内に致命的にIT知識が欠落してるように感じる 幹部の脳みそ電卓ワープロFAX時代で止まってるっぽい
91 21/10/10(日)11:03:23 No.854803961
「」に冗長化は大事って言われたから自分のサーバーも見よう見まねでやってみたけど結構楽しかった でもここに貼られたお題絵を集めるだけなのに大阪テキサスノルウェーの3カ所はやり過ぎな気もしてる
92 21/10/10(日)11:03:46 No.854804064
>そんな低確率な事象引いちゃったのか… しょうがない わけがない
93 21/10/10(日)11:03:55 No.854804111
RAID?とかわかんないから安く済ませてよ
94 21/10/10(日)11:04:11 No.854804184
この規模の止められないシステムではRaid6+6構成をさらに分散バックアップくらい欲しくないか?
95 21/10/10(日)11:04:13 No.854804193
4000年って数字は適切に保守をした場合の話であって 障害を放置したらダメなんですよ
96 21/10/10(日)11:04:26 No.854804242
HDD新しくしたらもう障害起きないんだね よかったね
97 21/10/10(日)11:04:43 No.854804307
>でもここに貼られたお題絵を集めるだけなのに大阪テキサスノルウェーの3カ所はやり過ぎな気もしてる やりすぎ
98 21/10/10(日)11:04:51 No.854804346
運用する側のシステムに問題が…
99 21/10/10(日)11:05:01 No.854804403
>とりあえずHDDを抜き差しするな 自分ちのPCでHDD壊れたならとりあえずやるし…
100 21/10/10(日)11:05:10 No.854804439
RAID1でスペア2本あったとしてもリビルド中に追加でこけたら死ぬのか…
101 21/10/10(日)11:05:13 No.854804455
>>4000年に一度しか壊れないって言ってたんですけど! >その一度が6年目にして出たんだ >残り3994年は安泰なんだ よっしゃ!むこう3994年は保守点検とかしてる人間リストラしていいな!
102 21/10/10(日)11:05:25 No.854804515
SSDにしろ
103 21/10/10(日)11:05:35 No.854804562
運用もアレだけど根本の設計もアレっぽいしどうするのが正解なんだろうな…
104 21/10/10(日)11:05:36 No.854804574
>HDD新しくしたらもう障害起きないんだね >よかったね 今度は電源ユニットとかHBAが死んで サーバ切り替えに失敗して 詰む
105 21/10/10(日)11:05:40 No.854804590
>SSDにしろ 高い
106 21/10/10(日)11:05:49 No.854804622
>大阪テキサスノルウェーの3カ所 物理的に離れた位置にするのは正解ではある
107 21/10/10(日)11:05:54 No.854804641
重要なシステムをRAID1や5で組むんじゃない
108 21/10/10(日)11:06:01 No.854804681
>「」に冗長化は大事って言われたから自分のサーバーも見よう見まねでやってみたけど結構楽しかった >でもここに貼られたお題絵を集めるだけなのに大阪テキサスノルウェーの3カ所はやり過ぎな気もしてる 日本が滅んでも「」のお題絵は残るんだな…
109 21/10/10(日)11:06:12 No.854804732
エンタープライズの極北みたいなストレージだしRAID6かRAID1+5とかにしてるもんだと思ってたけどそうでもないかんじなのかな?
110 21/10/10(日)11:06:35 No.854804831
メガバンクのデータより厳重に保守されるお題絵は何か現代アートを感じる
111 21/10/10(日)11:06:43 No.854804866
よくわからないけど車のサイドブレーキかけずに停車してたら坂道転がってしまったレベルの話? それで俺は悪くないからディーラーやメーカーに連絡しますって言ってる感じ?
112 21/10/10(日)11:06:52 No.854804906
災害考えると距離の防壁はやっぱり良いものだよ
113 21/10/10(日)11:07:07 No.854804968
>「」に冗長化は大事って言われたから自分のサーバーも見よう見まねでやってみたけど結構楽しかった >でもここに貼られたお題絵を集めるだけなのに大阪テキサスノルウェーの3カ所はやり過ぎな気もしてる もっと集める範囲を広げよう
114 21/10/10(日)11:07:13 No.854804995
>そんな奴ら連絡つけるように出来るの? 実際電話番号知らないからって連絡きたけど 知ってるけどもう引退してるから知らないって言っといた
115 21/10/10(日)11:07:18 No.854805018
せっかくの休日にこんな怖い話聞かされるなんて…
116 21/10/10(日)11:07:21 No.854805030
よく知らんけどRAIDって0とかじゃなければ同時に複数のHDDにデータ書き込まれてるもんじゃないの?
117 21/10/10(日)11:07:41 No.854805116
HDDが経年劣化したくらいで騒ぐってどれだけ脆いシステムなんだよ
118 21/10/10(日)11:07:43 No.854805126
>東日本と西日本で分けたりしないの? みずほ以外のメガバンクはそうやってるよ
119 21/10/10(日)11:07:59 No.854805215
当時の開発者集めてこいつらの責任ですってやるの?
120 21/10/10(日)11:08:02 No.854805233
大坂テキサスノルウェーだと西側に偏り過ぎているから ロシアにも置こう
121 21/10/10(日)11:08:07 No.854805263
みずほの株価がそんなに落ちてないのが不思議
122 21/10/10(日)11:08:10 No.854805278
>HDD新しくしたらもう障害起きないんだね >よかったね また4000年に一度タイマーが再開するから大丈夫です
123 21/10/10(日)11:08:18 No.854805311
>よくわからないけど車のサイドブレーキかけずに停車してたら坂道転がってしまったレベルの話? >それで俺は悪くないからディーラーやメーカーに連絡しますって言ってる感じ? エンジン3個積んでて1個は予備、動いてる1つが壊れても片肺で動きます!さらに予備と自動で交換されるので万全です!みたいなシステムで 予備に切り替わってる間にもう片方の動いてたエンジンも壊れましたって感じ 耐障害性の設計がまずダメ
124 21/10/10(日)11:08:23 No.854805330
やってることは犯人捜しの様な気もする
125 21/10/10(日)11:08:23 No.854805331
生贄は必要だからな…
126 21/10/10(日)11:08:31 No.854805355
>RAID1でスペア2本あったとしてもリビルド中に追加でこけたら死ぬのか… ミラーディスクの方は生き残る気がするんだけどまとめて死ぬのかな リビルド失敗でロールバックしてくれないのかな
127 21/10/10(日)11:08:55 No.854805459
>やってることは生贄捜しの様な気もする
128 21/10/10(日)11:09:13 No.854805539
色々社内まさはるのせいとは聞くけど社内まさはるでこんな根本的にガッタガタになるもんなの…?
129 21/10/10(日)11:09:21 No.854805570
直接的な原因と根本原因てのは別なんですよ 根本原因に触れられたくない時直接的な原因だけまくしたてて有耶無耶にする 俺もよくやる
130 21/10/10(日)11:09:30 No.854805612
>知り合いのSEが喜んでたよ >金かけるのにシブい上の連中が最近は「放置しておくとみずほみたいになりますよ」と言えば動くからありがたいって Twitterで全く同じネタ見たな
131 21/10/10(日)11:09:58 No.854805733
これDBサーバ本体自体はクラスタとか組んでなかったのかな 別拠点に副系あったとしても脆弱すぎませんかね
132 21/10/10(日)11:10:00 No.854805741
>みずほの株価がそんなに落ちてないのが不思議 これで落ちるならとっくに落ちてるでしょ
133 21/10/10(日)11:10:13 No.854805792
他所はここまで壊れてないので本当にどうしてこんなことに…
134 21/10/10(日)11:10:19 No.854805808
書き込みをした人によって削除されました
135 21/10/10(日)11:10:19 No.854805812
>Twitterで全く同じネタ見たな 実際その通りだからネタというか普通にあるあるなので…
136 21/10/10(日)11:10:39 No.854805879
>色々社内まさはるのせいとは聞くけど社内まさはるでこんな根本的にガッタガタになるもんなの…? まさはるのために開発3社で期間もグダグダ長くかかってるから中身は相当スパゲティなんだろ
137 21/10/10(日)11:10:53 No.854805933
そこで差し出される生贄が的外れだとまた悲劇は繰り返される
138 21/10/10(日)11:11:07 No.854806004
>色々社内まさはるのせいとは聞くけど社内まさはるでこんな根本的にガッタガタになるもんなの…? システムごとに組織が縦割りになってたりすると運用ノウハウの連携がうまく出来ないってのはまああり得る お粗末にすぎるけど
139 21/10/10(日)11:11:12 No.854806023
DBサーバだけどOS領域くらいしか使わないんで雑にRAID1のホットスペアでいいだろ…みたいな感じなのかな? そこがこけても副系あるし安くしよ!的な
140 21/10/10(日)11:11:15 No.854806040
このレベルだと筐体内と筐体外で冗長取るのは普通かと思ってた
141 21/10/10(日)11:11:31 No.854806110
>セカンダリの切り替え失敗してる時点で運用レベル的にも終わってる…てかそれくらいクラスタソフトで自動化しときなさいよ ここらへんにマニュアルも手順もクソのクソ運用設計の臭いがするな
142 21/10/10(日)11:11:44 No.854806181
>みずほの株価がそんなに落ちてないのが不思議 株持ってるような年齢がこれを理解できるとは思えん
143 21/10/10(日)11:11:45 No.854806188
>>よくわからないけど車のサイドブレーキかけずに停車してたら坂道転がってしまったレベルの話? >>それで俺は悪くないからディーラーやメーカーに連絡しますって言ってる感じ? >エンジン3個積んでて1個は予備、動いてる1つが壊れても片肺で動きます!さらに予備と自動で交換されるので万全です!みたいなシステムで >予備に切り替わってる間にもう片方の動いてたエンジンも壊れましたって感じ >耐障害性の設計がまずダメ これ見た限りだと対策はきちんとしてて生涯に生涯が重なる事象が理不尽過ぎると思うが 耐障害性って観点から見るとどう改善するの?
144 21/10/10(日)11:11:45 No.854806192
どこが悪いというか全部悪い そう言っておく お あ し す
145 21/10/10(日)11:11:49 No.854806211
次の障害もHDDのせいにしよう
146 21/10/10(日)11:11:53 No.854806224
停止したら業務改善命令とか出るやばいシステムの姿がこれか…
147 21/10/10(日)11:12:08 No.854806288
>色々社内まさはるのせいとは聞くけど社内まさはるでこんな根本的にガッタガタになるもんなの…? そもそも基幹システムがガッタガタのグッズグズでさらに運用法方は不明瞭で仕様書は行方不明なんだぞ まともに動かせって方が無理だわ
148 21/10/10(日)11:12:22 No.854806347
>これDBサーバ本体自体はクラスタとか組んでなかったのかな マスターとスレーブがあってマスターに障害があったら自動で切り替わるようになってたよ! 自動で切り替わりませんでした… 手動で切り替えようとしたら追加コマンドの入力を忘れてて失敗しました…
149 21/10/10(日)11:12:33 No.854806400
>予備に切り替わってる間にもう片方の動いてたエンジンも壊れましたって感じ >耐障害性の設計がまずダメ 素人目には設計的には普通で予備に切り替わった時にすぐメインを変えなかったのがダメに見えるけど... そもそも片肺じゃ走れない負荷だったって事?
150 21/10/10(日)11:12:34 No.854806406
>色々社内まさはるのせいとは聞くけど社内まさはるでこんな根本的にガッタガタになるもんなの…? システム統合できずに並立共存させるってことは運用保守も効率がた落ちだからな
151 21/10/10(日)11:12:35 No.854806412
>7. みずほは夜の2時半、富士通にDBだけ移行する手順書を作らせる 富士通すげえな!
152 21/10/10(日)11:12:35 No.854806415
>2. 多摩副DBへの切り替えコマンドをうっかり飛ばす うっかりで済ますなボケ
153 21/10/10(日)11:13:14 No.854806591
昔のみずほって○○支店のATMでしかお取り扱いできませんみたいのあったよね
154 21/10/10(日)11:13:23 No.854806631
>これ見た限りだと対策はきちんとしてて生涯に生涯が重なる事象が理不尽過ぎると思うが >耐障害性って観点から見るとどう改善するの? 本当にこけたらダメならエンジンが2個同時にこけても大丈夫な設計にする さらに予備の同じ車をコストかけてもいいからレッカーで並走させる これくらいはやるぞマジで止めたらやばいシステムなら尚更
155 21/10/10(日)11:13:27 No.854806645
太古のシステムをなるべく変えずに新しいのにしてね♥️みたいなノリで生まれたのだろうか
156 21/10/10(日)11:13:40 No.854806710
メインの正副が壊れましたはいいけど災対切り替えうまくいかなかったのは運用と設計ですよね…?
157 21/10/10(日)11:13:57 No.854806770
>これ見た限りだと対策はきちんとしてて生涯に生涯が重なる事象が理不尽過ぎると思うが これなら保守や管理を全くしてなくても6年は持ちますって話なんじゃないか
158 21/10/10(日)11:14:02 No.854806797
なんでみんなここ使うの…?
159 21/10/10(日)11:14:40 No.854806984
こういうのって全く同じ筐体を用意しといてそっちに切り替えたりしないの?
160 21/10/10(日)11:14:48 No.854807023
>なんでみんなここ使うの…? 会社がね指定をしてくるの
161 21/10/10(日)11:14:50 No.854807039
>そもそも片肺じゃ走れない負荷だったって事? その片肺もちゃんとメンテしてなかったから実際に動かしたら即エンジン壊れました!ってとこかな…
162 21/10/10(日)11:14:57 No.854807065
>なんでみんなここ使うの…? 会社指定
163 21/10/10(日)11:15:09 No.854807129
面白すぎる…
164 21/10/10(日)11:15:19 No.854807174
>太古のシステムをなるべく変えずに新しいのにしてね♥みたいなノリで生まれたのだろうか 3つのシステムを一つにしても条件に追加だ
165 21/10/10(日)11:15:25 No.854807196
会社も系列だったり取引先だったりで使わざるを得ないからね
166 21/10/10(日)11:15:38 No.854807259
>なんでみんなここ使うの…? 金融コード0001は伊達じゃない!
167 21/10/10(日)11:15:39 No.854807262
なんかイベントみたいで楽しかったけどそろそろまともに動くようにしないと実害が大きいと思うから頑張って
168 21/10/10(日)11:15:44 No.854807297
みずほ使ってないから今この障害で何が起きてるのか知らない 単純な感じで見るとお金下ろせない感じ?
169 21/10/10(日)11:15:54 No.854807329
コールドスタンバイなシステムを動かしたら切り替えうまくイカないとかよくあるよくある
170 21/10/10(日)11:16:00 No.854807364
>昔のみずほって○○支店のATMでしかお取り扱いできませんみたいのあったよね その時は看板はみずほになったけど裏側の富士銀と勧銀のシステムがそのまま動いていて リレーコンピュータというやつで無理やり繋いでいたから 処理によってはリレーコンピュータが対応してないので旧富士銀の口座は旧富士銀支店に 旧勧銀の口座は旧勧銀支店に行かないとダメだった
171 21/10/10(日)11:16:01 No.854807365
>なんでみんなここ使うの…? は?金融機関コード0001の最古参なんだが?
172 21/10/10(日)11:16:05 No.854807385
>>これ見た限りだと対策はきちんとしてて生涯に生涯が重なる事象が理不尽過ぎると思うが >>耐障害性って観点から見るとどう改善するの? >本当にこけたらダメならエンジンが2個同時にこけても大丈夫な設計にする >さらに予備の同じ車をコストかけてもいいからレッカーで並走させる >これくらいはやるぞマジで止めたらやばいシステムなら尚更 なるほど まあ全国や世界からアクセスするシステムに対しては不十分だったって事ね
173 21/10/10(日)11:16:11 No.854807412
>メインの正副が壊れましたはいいけど災対切り替えうまくいかなかったのは運用と設計ですよね…? いいえ!壊れたのが直接的な原因です!いやー!まさか壊れるとはなー!タイミング悪かったなー!
174 21/10/10(日)11:16:15 No.854807431
>>太古のシステムをなるべく変えずに新しいのにしてね♥みたいなノリで生まれたのだろうか >3つのシステムを一つにしても条件に追加だ これやったのみずほだけなんだよね…他のメガバンはそんなの無理!って片方のシステムに寄せてるから…
175 21/10/10(日)11:16:20 No.854807446
ガンで死んだのは加齢による細胞の経年劣化です
176 21/10/10(日)11:16:23 No.854807459
なぜ今動いてるシステムがあるのに古いだけの理由でお金をかけて更改しなきゃならないのか なぜ起きてもないことを想定してお金かけなきゃならないのかはよく言われる
177 21/10/10(日)11:16:24 No.854807464
>3つのシステムを一つにしても条件に追加だ ゲッターじゃないんだから…
178 21/10/10(日)11:16:29 No.854807490
>こういうのって全く同じ筐体を用意しといてそっちに切り替えたりしないの? あったけど失敗しました
179 21/10/10(日)11:16:36 No.854807524
株価も落ちない 利用者も減らない 何も問題はないな
180 21/10/10(日)11:16:43 No.854807551
メインの主と副、サブの主副で4系統ある メインの主の中にもRAIDで冗長化してるけど運悪く(?)2本HDD同時に壊れて停止 メインの主から副に切り替えするとこをうっかり飛ばしてしまった(?) なのでメインが停止しました そこからサブのほうにフェールオーバーしようとしましたけど失敗して完全停止しました ってこと?
181 21/10/10(日)11:16:47 No.854807563
>単純な感じで見るとお金下ろせない感じ? 一般ユーザー目線で見るとそんなに大きい問題はおきてない
182 21/10/10(日)11:16:47 No.854807564
今でもうちが停止したり潰れたりしたら大変なことになっちゃうますよね省庁さん?って態度なの?
183 21/10/10(日)11:16:57 No.854807600
>>さらにDC自体を別の拠点にする冗長化で全てが同時に故障する確率がそれくらいって話 >使う人間の無能さを考慮に入れてなかったっていうオチ そもそも論として机上の空論 ちゃんと作ってること前提だよ
184 21/10/10(日)11:17:16 No.854807686
ややこしいけどHDD①②③があって①と②は運用系待機系 ①が死んで②に切り替わるところまでは順調だったけど ③を新たな待機系にするために②からコピーしてる時に②が死んだってことか これ自体は正直同情する
185 21/10/10(日)11:17:19 No.854807702
>ガンで死んだのは加齢による細胞の経年劣化です 運動したり食事見直したりした?
186 21/10/10(日)11:17:44 No.854807808
みずほも可能なら統一はしたかっただろうけども 自分のところの派閥の仕様で
187 21/10/10(日)11:18:00 No.854807886
リビルド中にさらにこけて停止はまぁあり得る負荷がかかるわけだし ただそこからの切り替え飛ばしとかはヒューマンエラーですよね?
188 21/10/10(日)11:18:05 No.854807913
許せねえなHDD…! HDDが悪いのに風評被害を撒き散らしてた「」達はごめんなさいの準備はできた?
189 21/10/10(日)11:18:17 No.854807965
若いHDDが真っ赤に燃えて
190 21/10/10(日)11:18:18 No.854807966
>>3つのシステムを一つにしても条件に追加だ >ゲッターじゃないんだから… 3つの派閥が一つになれば
191 21/10/10(日)11:18:22 No.854807979
>今でもうちが停止したり潰れたりしたら大変なことになっちゃうますよね省庁さん?って態度なの? だからといってもはや野放しにできないのでガチでブン殴りに行こうとしてるところ
192 21/10/10(日)11:18:27 No.854808001
>株価も落ちない >利用者も減らない >何も問題はないな 預金が勝手に減らなきゃ大丈夫
193 21/10/10(日)11:18:37 No.854808054
派閥争いの勝敗をじゃんけんで決めておけばこんなことにはならなかった…?
194 21/10/10(日)11:18:38 No.854808058
>手動で切り替えようとしたら追加コマンドの入力を忘れてて失敗しました… 後から調べて分かったことだけど この追加コマンドが入力されていたら多摩副DBでちゃんと切り替え成功して わざわざ千葉に切り替えるような危険で面倒なことしなくて済んだよ
195 21/10/10(日)11:18:44 No.854808089
>>これ見た限りだと対策はきちんとしてて生涯に生涯が重なる事象が理不尽過ぎると思うが >>耐障害性って観点から見るとどう改善するの? >本当にこけたらダメならエンジンが2個同時にこけても大丈夫な設計にする >さらに予備の同じ車をコストかけてもいいからレッカーで並走させる >これくらいはやるぞマジで止めたらやばいシステムなら尚更 車自体をもう一個作るっていうのはなるほどと思ったけど それってランニングコスト的なものもそのまま2倍になるんじゃないの?予備だから特にコストかからないのかな
196 21/10/10(日)11:18:56 No.854808138
>単純な感じで見るとお金下ろせない感じ? 日本と言う人体において銀行は心臓で企業は各臓器や細胞なんだ 心臓が臓器や細胞に血を送れなくなったらどうなる?
197 <a href="mailto:HDD">21/10/10(日)11:19:02</a> [HDD] No.854808171
>許せねえなHDD…! >HDDが悪いのに風評被害を撒き散らしてた「」達はごめんなさいの準備はできた? 俺のせいにすんな
198 21/10/10(日)11:19:20 No.854808241
>だからといってもはや野放しにできないのでガチでブン殴りに行こうとしてるところ ぶん殴ってどうにかなるかな…
199 21/10/10(日)11:19:27 No.854808269
>>7. みずほは夜の2時半、富士通にDBだけ移行する手順書を作らせる >富士通すげえな! 日常茶飯事 まじで
200 21/10/10(日)11:19:33 No.854808291
>心臓が臓器や細胞に血を送れなくなったらどうなる? 末端が腐る!
201 21/10/10(日)11:19:35 No.854808296
リカバリプランて気軽に検証できないから 大抵起きたときのぶっつけになるよ 世の中の大半は南無三!で回ってるよ
202 21/10/10(日)11:19:41 No.854808333
>それってランニングコスト的なものもそのまま2倍になるんじゃないの?予備だから特にコストかからないのかな 2倍かかります でもそれぐらい壊れたら困る大事なシステムなのででコストをかけます
203 21/10/10(日)11:19:44 No.854808351
>車自体をもう一個作るっていうのはなるほどと思ったけど >それってランニングコスト的なものもそのまま2倍になるんじゃないの?予備だから特にコストかからないのかな 当然2倍かかるよ金は ただそれを許容するほど絶対に止めてはいけないシステムの場合は当然やるのだ
204 21/10/10(日)11:20:02 No.854808432
>車自体をもう一個作るっていうのはなるほどと思ったけど >それってランニングコスト的なものもそのまま2倍になるんじゃないの?予備だから特にコストかからないのかな コストが2倍になろうとやっておくべきだったのよ imgが落ちてログが吹っ飛ぶのは次元が違う
205 21/10/10(日)11:20:02 No.854808434
みずほ「いいのか?潰れたら困るだろ?助けるなら今だぞ」
206 21/10/10(日)11:20:08 No.854808447
ヒューマンエラーがあったのを見るとクソって周知された現場にはもうそれなりの人材しか集まらんのだろうなって
207 21/10/10(日)11:20:14 No.854808486
>>心臓が臓器や細胞に血を送れなくなったらどうなる? >末端が腐る! 既にグズグズだから問題ないヨシ!
208 21/10/10(日)11:20:19 No.854808513
SSDにするとHDDのせいにできないからな…
209 21/10/10(日)11:20:21 No.854808522
>それってランニングコスト的なものもそのまま2倍になるんじゃないの?予備だから特にコストかからないのかな かかる かかるけれど止まったらそれ以上の損害が想定されうるので必要経費と腹くくって払う
210 21/10/10(日)11:20:24 No.854808535
>>3つのシステムを一つにしても条件に追加だ >ゲッターじゃないんだから… ゲッター線と光子力と光量子で動くエンジンをそれぞれそのままにして一つのシステムで制御してください それがみずほだ
211 21/10/10(日)11:20:26 No.854808540
なら金をかけてない銀行がバカの極みってことにならない?
212 21/10/10(日)11:20:33 No.854808569
imgとmay2つあれば片方が落ちても片方に乗り込めるからな
213 21/10/10(日)11:20:36 No.854808580
>なら金をかけてない銀行がバカの極みってことにならない? はい
214 21/10/10(日)11:20:42 No.854808608
いもげが落ちて6時間繋がらなかった!とかそういうのとは次元が違いますからね…
215 21/10/10(日)11:20:55 No.854808668
もう銀行3分割にしちゃえ
216 21/10/10(日)11:20:56 No.854808669
>ちなみに俺のNASでもHDDが1台死んだくらいじゃ落ちない構成になってるし >予算の都合で載せてない予備HDDを用意できれば即死んだHDDを切り離して予備への代替作業が始まるくらいにはHDDの冗長化は簡単 みたいなノリで銀行のシステムを構築するから今回みたいな事になるんだよ ホットスペアはあったけどリビルド完了前にもう一個故障でアレイ崩壊なので 構築当初の個体は故障時期も似るから予防交換しておかないとこういうことが起きる
217 21/10/10(日)11:21:00 No.854808687
思ったけどメインとバックアップのHDDを同時期に仕入れたなら同時期に壊れても何もおかしくなくない?
218 21/10/10(日)11:21:55 No.854808939
>なら金をかけてない銀行がバカの極みってことにならない? いやみずほは金をかけてないわけじゃないよ ただ障害発生時の動きがグダグダなだけ
219 21/10/10(日)11:21:58 No.854808949
>思ったけどメインとバックアップのHDDを同時期に仕入れたなら同時期に壊れても何もおかしくなくない? だから製造時期が違うHDDを用意するんだよ… それに >同じ型番の機器で故障率は今年度2倍に増えているデータがあったが、みずほは故障の予兆としてとらえていなかった。
220 21/10/10(日)11:22:00 No.854808961
>ちなみに俺のNASでもHDDが1台死んだくらいじゃ落ちない構成になってるし >予算の都合で載せてない予備HDDを用意できれば即死んだHDDを切り離して予備への代替作業が始まるくらいにはHDDの冗長化は簡単 トランザクション規模が違いすぎるだろ…
221 21/10/10(日)11:22:07 No.854808997
>思ったけどメインとバックアップのHDDを同時期に仕入れたなら同時期に壊れても何もおかしくなくない? それはそう 追加費用出して導入時に別ロットのHDD入れたりするけどそもそも冗長化甘いからそんなんせんでもええやろ的なやつだと思う
222 21/10/10(日)11:22:11 No.854809015
>思ったけどメインとバックアップのHDDを同時期に仕入れたなら同時期に壊れても何もおかしくなくない? 普通はずらす
223 21/10/10(日)11:22:19 No.854809055
みずほは金かけてないどころかジャブジャブ突っ込んでるよ…
224 21/10/10(日)11:22:53 No.854809183
故障率が2倍って明らかに異常だから特定ロットのディスクが悪いかファームウェアレベルの不具合の可能性高いのに富士通さん調査しなかったんですか??
225 21/10/10(日)11:23:01 No.854809230
運用することになった会社は隼人みたいな感じだろうな おいていかないでくれ!
226 21/10/10(日)11:23:01 No.854809233
>>同じ型番の機器で故障率は今年度2倍に増えているデータがあったが、みずほは故障の予兆としてとらえていなかった。 根本的に運用問題じゃねえか!
227 21/10/10(日)11:23:02 No.854809238
>なら金をかけてない銀行がバカの極みってことにならない? 金はかけた 障害発生時の訓練を小学校の避難訓練以下の練度でしかしてなかった
228 21/10/10(日)11:23:09 No.854809276
>なら金をかけてない銀行がバカの極みってことにならない? 金ならかけましたよ!スカイツリー7本分!それでもだめだったんです!
229 21/10/10(日)11:23:32 No.854809376
HDDメーカーが悪い みずほ社員は何も悪くないよ
230 21/10/10(日)11:23:49 No.854809453
そのお金はどこに消えたの?
231 21/10/10(日)11:23:50 No.854809456
経年劣化してるのは上層部では?
232 21/10/10(日)11:24:03 No.854809510
金をかけた結果を把握してなかった
233 21/10/10(日)11:24:11 No.854809553
>>なら金をかけてない銀行がバカの極みってことにならない? >金ならかけましたよ!スカイツリー7本分!それでもだめだったんです! 何にそんなに金かけたんです…?
234 21/10/10(日)11:24:14 No.854809566
>>なら金をかけてない銀行がバカの極みってことにならない? >金ならかけましたよ!スカイツリー7本分!それでもだめだったんです! それちゃんと下請けとかに配った?着服してない?
235 21/10/10(日)11:24:23 No.854809607
元請けがRAID4体制なんだからもしかしてhddのRAIDのほうが少ないんじゃないのか
236 21/10/10(日)11:24:24 No.854809609
>そのお金はどこに消えたの? 賽の河原
237 21/10/10(日)11:24:25 No.854809617
>なら金をかけてない銀行がバカの極みってことにならない? 4000億かけたよ 大半アホな発注による無駄金と三者の対立に消えただけで
238 21/10/10(日)11:24:37 No.854809680
>経年劣化してるのは上層部では? さい らま
239 21/10/10(日)11:24:41 No.854809699
>みずほは金かけてないどころかジャブジャブ突っ込んでるよ… 大丈夫? 水漏れみたいに人材なんたらの連中に流されてない?
240 21/10/10(日)11:24:46 No.854809720
>経年劣化してるのは上層部では? 応答も遅いしそろそろ寿命近いから交換しないと
241 21/10/10(日)11:24:56 No.854809769
故障率が前年度比の2倍って激ヤバなんだけどそれ放置してるのやばない?
242 21/10/10(日)11:24:58 No.854809779
銀行なのに金の運用下手なんだな…
243 21/10/10(日)11:25:10 No.854809822
>それちゃんと下請けとかに配った?着服してない? 下請けが下請けに配り続けてデイジーチェーン起こして一番下は手取り二十万です
244 21/10/10(日)11:25:27 No.854809898
>何にそんなに金かけたんです…? 派閥闘争による仕様変更の嵐
245 21/10/10(日)11:25:31 No.854809913
人を減らした瞬間に不具合起きるのは偶然なのかな?
246 21/10/10(日)11:25:35 No.854809929
>経年劣化してるのは上層部では? 経年のせいかな…初期不良じゃない?
247 21/10/10(日)11:25:41 No.854809946
導入に金かけても運用保守でケチってたんだろうし・・
248 21/10/10(日)11:25:49 No.854809993
>>そのお金はどこに消えたの? >賽の河原 it土方が石を積む地獄絵図…
249 21/10/10(日)11:25:54 No.854810019
どうして合併したのに前の会社のグループで派閥作って足引っ張りあってるんです?
250 21/10/10(日)11:26:06 No.854810074
>元請けがRAID4体制なんだからもしかしてhddのRAIDのほうが少ないんじゃないのか RAID4使ってる奴初めて見た
251 21/10/10(日)11:26:18 No.854810149
>>経年劣化してるのは上層部では? >経年のせいかな…初期不良じゃない? 故障率2倍の世代なんだろう
252 21/10/10(日)11:26:23 No.854810166
>故障率が前年度比の2倍って激ヤバなんだけどそれ放置してるのやばない? 4000年持つんだから大丈夫って思ってるから…
253 21/10/10(日)11:26:25 No.854810176
数字が大きければ大きいほど良いのはimgのほうだねも銀行の勘定系システムも一緒よ
254 21/10/10(日)11:26:29 No.854810197
>人を減らした瞬間に不具合起きるのは偶然なのかな? 残った人間は誰も!運用方法を知らないのである!
255 21/10/10(日)11:26:32 No.854810214
会社はスルガとどっちがヤバいの?
256 21/10/10(日)11:26:37 No.854810228
>銀行なのに金の運用下手なんだな… 違うよ銀行だからソロバン使うのは得意だけどコンピューター使うのは苦手なだけだよ 使える限界の電子機器が電卓
257 21/10/10(日)11:26:41 No.854810246
>下請けが下請けに配り続けてデイジーチェーン起こして一番下は手取り二十万です まだ5次受け6次受けとかいるのでガチ末端は…
258 21/10/10(日)11:26:42 No.854810247
>何にそんなに金かけたんです…? 「」が言うには君んとこに発注したけど実際仕事されるとうちの面目に関わるから 金だけ渡すから障害者の割り箸を数えて紙袋に入れる作業以下の虚無な仕事やったふりしといてって言われたらしい
259 21/10/10(日)11:26:47 No.854810274
良い事思いついた もう一回3社に分離したら?
260 21/10/10(日)11:26:47 No.854810275
>人を減らした瞬間に不具合起きるのは偶然なのかな? 偶然! 偶然です!
261 21/10/10(日)11:26:51 No.854810292
>>それちゃんと下請けとかに配った?着服してない? >下請けが下請けに配り続けてデイジーチェーン起こして一番下は手取り二十万です 地獄じゃねぇか!
262 21/10/10(日)11:27:01 No.854810336
経年劣化なら仕方ないな そんなわけねぇだろ
263 21/10/10(日)11:27:03 No.854810351
>どうして合併したのに前の会社のグループで派閥作って足引っ張りあってるんです? 俺たちが得したい
264 21/10/10(日)11:27:06 No.854810361
金さえ突っ込めばまともなものができる そんなわけはないんですよね…
265 21/10/10(日)11:27:32 No.854810479
>経年劣化してるのは上層部では? それは初期不良だ
266 21/10/10(日)11:27:34 No.854810493
銀行内のヒエラルキーではシステム部門は最下層の非人レベルの扱いだからマジで さすがに近年では重要度は増してるけど 0001は伊達じゃないのでいまだに最も古い慣例のまま動いてるとも言える
267 21/10/10(日)11:27:37 No.854810504
>「」が言うには君んとこに発注したけど実際仕事されるとうちの面目に関わるから >金だけ渡すから障害者の割り箸を数えて紙袋に入れる作業以下の虚無な仕事やったふりしといてって言われたらしい 何一つ何言ってるかわからない…
268 21/10/10(日)11:27:48 No.854810562
RAIDなんて基本情報どころかITパスポートでやる話じゃねーか
269 21/10/10(日)11:27:50 No.854810575
>>下請けが下請けに配り続けてデイジーチェーン起こして一番下は手取り二十万です >まだ5次受け6次受けとかいるのでガチ末端は… 国でもないのに5次受けとか馬鹿じゃないの…? 孫請けで終わらせとけよ…
270 21/10/10(日)11:28:01 No.854810628
誰も!人材の流れを把握して…できてないのである!
271 21/10/10(日)11:28:06 No.854810652
>>どうして合併したのに前の会社のグループで派閥作って足引っ張りあってるんです? >俺たちが得したい なんとかのジレンマってやつで見た気がする
272 21/10/10(日)11:28:19 No.854810721
>「」が言うには君んとこに発注したけど実際仕事されるとうちの面目に関わるから >金だけ渡すから障害者の割り箸を数えて紙袋に入れる作業以下の虚無な仕事やったふりしといてって言われたらしい なんすか? 真面目に仕事するとヤバい部分があるってバレそうだったんすか?
273 21/10/10(日)11:28:24 No.854810745
>銀行なのに金の運用下手なんだな… お金はHDDと違ってほっといても傷んだら死んだりしないからな
274 21/10/10(日)11:28:26 No.854810756
>>人を減らした瞬間に不具合起きるのは偶然なのかな? >偶然! >偶然です! つう くそ なを
275 21/10/10(日)11:28:26 No.854810758
>会社はスルガとどっちがヤバいの? 地銀とメガバンク比べるもんでもないし問題の種類が違う 共通点があるとすればどっちも第三者の調査報告書で上がクソだわって言われたぐらい
276 21/10/10(日)11:28:32 No.854810778
>良い事思いついた >もう一回3社に分離したら? 次のシステム仕様書に旧みずほのシステムをベースとするとか書かれそう
277 21/10/10(日)11:28:47 No.854810855
青い銀行の案件には関わるなって言われてたんだっけ
278 21/10/10(日)11:28:54 No.854810899
HDDを神棚に祀るの忘れたんじゃないか
279 21/10/10(日)11:28:55 No.854810906
>>下請けが下請けに配り続けてデイジーチェーン起こして一番下は手取り二十万です >まだ5次受け6次受けとかいるのでガチ末端は… 6次請けとか原発処理じゃねえんだからさ… おかしくない?
280 21/10/10(日)11:28:56 No.854810908
>RAIDなんて基本情報どころかITパスポートでやる話じゃねーか 流石にRAIDの運用に関する問題は出ないぞ
281 21/10/10(日)11:28:58 No.854810919
HDDが壊れることは折り込みずみで 同DC内に副DBが用意されてて切り替わるはずだったのに失敗したが最大の問題
282 21/10/10(日)11:29:07 No.854810958
>銀行内のヒエラルキーではシステム部門は最下層の非人レベルの扱いだからマジで >さすがに近年では重要度は増してるけど >0001は伊達じゃないのでいまだに最も古い慣例のまま動いてるとも言える そんな単純な話ならもっとまともなテコ入れできてんだ… 実際は銀行組合で各銀行ごとに部門混ぜこぜしてる環境だから内部むちゃくちゃ
283 21/10/10(日)11:29:15 No.854810989
>国でもないのに5次受けとか馬鹿じゃないの…? 言うても都市銀行なら半官半民くらいの感覚だろ
284 21/10/10(日)11:29:27 No.854811046
MINORIちゃん可哀想
285 21/10/10(日)11:29:29 No.854811059
>HDDが壊れることは折り込みずみで >同DC内に副DBが用意されてて切り替わるはずだったのに失敗したが最大の問題 それってヒューマンエラーですよね??なぜHDDが悪いみたいに報道されているんですか!
286 21/10/10(日)11:29:47 No.854811152
金をかければ良いシステムが運営できるというナイーブな考えの例
287 21/10/10(日)11:29:59 No.854811222
最初の切り替え失敗したエンジニア無事かな…口封じに何かされてそう
288 21/10/10(日)11:30:07 No.854811255
>6次請けとか原発処理じゃねえんだからさ… >おかしくない? お金だけ奪って管理責任も追わない案件だよ?って真面目に言う奴らがいるから
289 21/10/10(日)11:30:08 No.854811261
ワシではない!このHDDが勝手に!
290 21/10/10(日)11:30:17 No.854811295
>6次請けとか原発処理じゃねえんだからさ… >おかしくない? 日本金融界の原爆ではある
291 21/10/10(日)11:30:17 No.854811296
IT部門が閑職扱いの時点でお察しだろ
292 21/10/10(日)11:30:17 No.854811297
データセンターの運用どうなってんだよ
293 21/10/10(日)11:30:21 No.854811316
>>元請けがRAID4体制なんだからもしかしてhddのRAIDのほうが少ないんじゃないのか >RAID4使ってる奴初めて見た RAID4はパリティを特定のストレージに書くので当然そこに負荷がかかるけど そこを高耐久のにして乗り切るというのがある というか富士通のストレージがそれ https://www.fujitsu.com/jp/products/computing/storage/eternus/glossary/raid/07.html
294 21/10/10(日)11:30:25 No.854811332
>金をかければ良いシステムが運営できるというナイーブな考えの例 金かかるのは確かだし…
295 21/10/10(日)11:30:46 No.854811431
>最初の切り替え失敗したエンジニア無事かな…口封じに何かされてそう エンジニア(部署替えで任命された銀行員)
296 21/10/10(日)11:30:58 No.854811483
DXとか言う前に下請け構造なんとかしろよ…とは思う
297 21/10/10(日)11:31:14 No.854811539
>最初の切り替え失敗したエンジニア無事かな…口封じに何かされてそう 口封じなんかするわけないだろ大事な生け贄なんだから
298 21/10/10(日)11:31:15 No.854811541
パリティディスク分散させない理由がよくわからん… リビルドが早いとか?
299 21/10/10(日)11:31:17 No.854811550
>金をかければ良いシステムが運営できるというナイーブな考えの例 金使って具体的に何を作るか見えてる人が上に誰一人いねぇ!
300 21/10/10(日)11:31:19 No.854811557
>DXとか言う前に下請け構造なんとかしろよ…とは思う 孫受けは違法行為のはずなんだけどね
301 21/10/10(日)11:31:20 No.854811565
>RAID4はパリティを特定のストレージに書くので当然そこに負荷がかかるけど >そこを高耐久のにして乗り切るというのがある >というか富士通のストレージがそれ なるほどそれで乗り切ったということか
302 21/10/10(日)11:31:23 No.854811579
>それってヒューマンエラーですよね??なぜHDDが悪いみたいに報道されているんですか! 落とし所に丁度いい塩梅だったとしか…
303 21/10/10(日)11:31:26 No.854811596
組織が巨大になるとこうなるんだなぁ…
304 21/10/10(日)11:31:26 No.854811600
ここの仕事上で揉めてなかなか指示降りてこないし座って好きな事してるだけで金もらえる日が結構あった
305 21/10/10(日)11:31:39 No.854811660
いっそ脱ITで全部紙で処理すれば良いんじゃないかな
306 21/10/10(日)11:31:56 No.854811726
どこ製のHDDなんだろ…生贄にされたメーカーは怒っていいよ
307 21/10/10(日)11:31:57 No.854811730
雇用にはめっちゃくちゃ貢献してたからな みずほ終わってから別会社作ったり社員切り売りしたりして苦労してるよ富士通
308 21/10/10(日)11:32:06 No.854811768
>国でもないのに5次受けとか馬鹿じゃないの…? >孫請けで終わらせとけよ… 孫受けまでで確保できるような開発規模じゃないでしょ現実的に
309 21/10/10(日)11:32:11 No.854811794
>金をかければ良いシステムが運営できるというナイーブな考えの例 おかしい…資本主義というか市場経済的には金を積んで高付加価値商品を手にいれれば大丈夫のはずなのに…
310 21/10/10(日)11:32:34 No.854811891
>いっそ脱ITで全部紙で処理すれば良いんじゃないかな 手数料いくらになるんだろう…
311 21/10/10(日)11:32:50 No.854811953
>組織が巨大になるとこうなるんだなぁ… 規模に加えていくつもの組織がくっついたというスパゲッティ組織すぎる…
312 21/10/10(日)11:33:04 No.854812008
自分が交通事故起こしておいてメーカーには安全な車を作ってほしいって言ってるみたい
313 21/10/10(日)11:33:21 No.854812084
お年寄りにPCの事教えるのただでさえ重労働だからな うちの親父も勤め先にPC導入する事になって使い方教えるのに疲弊してたらしく毎日疲れ果てて帰ってきてた
314 21/10/10(日)11:33:29 No.854812113
>おかしい…資本主義というか市場経済的には金を積んで高付加価値商品を手にいれれば大丈夫のはずなのに… 実際に現場で動いてる連中は高卒レベルの賃金だからじゃないですかね…
315 21/10/10(日)11:33:32 No.854812123
>どこ製のHDDなんだろ…生贄にされたメーカーは怒っていいよ WD REDとか?
316 21/10/10(日)11:33:36 No.854812145
>ここの仕事上で揉めてなかなか指示降りてこないし座って好きな事してるだけで金もらえる日が結構あった 早抜けしたら勝ちじゃないっすか
317 21/10/10(日)11:33:48 No.854812204
実際預金額とかどうなってるんだろう 解約者とかかなり増えてそうだけど
318 21/10/10(日)11:34:06 No.854812302
>どこ製のHDDなんだろ…生贄にされたメーカーは怒っていいよ あんまりな真似してると例の交通事故でブレーキのせいにされたメーカーみたいに反撃されそう
319 21/10/10(日)11:34:12 No.854812328
まあお金払ってる方はその金額に応じた責任を求めるとは思うけどさ…
320 21/10/10(日)11:34:19 No.854812365
HDDが壊れる人がミスるくらいならどの銀行でも起きてるだろ そっからこうなるのが問題なんじゃろ
321 21/10/10(日)11:34:27 No.854812401
>ここの仕事上で揉めてなかなか指示降りてこないし座って好きな事してるだけで金もらえる日が結構あった 大丈夫?納期も動いてないよね?
322 21/10/10(日)11:34:29 No.854812415
富士通ならだいたいサムスンじゃね?
323 21/10/10(日)11:34:31 No.854812428
>ここの仕事上で揉めてなかなか指示降りてこないし座って好きな事してるだけで金もらえる日が結構あった 後半は地獄っぽいなそれ
324 21/10/10(日)11:34:32 No.854812431
>組織が巨大になるとこうなるんだなぁ… ハバツが生まれやすくなる クリティカルな部分まで闘争があるとこうなる
325 21/10/10(日)11:34:37 No.854812452
何もしてないのに壊れた
326 21/10/10(日)11:34:46 No.854812493
実際に手を動かしてる人たちは安月給だから責任を持ってやれ言われてもやらないよ
327 21/10/10(日)11:34:50 No.854812519
>何もしないから壊れた
328 21/10/10(日)11:35:05 No.854812586
>自分が交通事故起こしておいてメーカーには安全な車を作ってほしいって言ってるみたい そりゃ上級国民だからな…
329 21/10/10(日)11:35:06 No.854812588
>何もしてないから壊れた
330 21/10/10(日)11:35:30 No.854812697
同じストレージ故障でもベンダーのせいにしない東証の社長は偉かったな
331 21/10/10(日)11:35:30 No.854812698
>HDDが壊れることは折り込みずみで >同DC内に副DBが用意されてて切り替わるはずだったのに失敗したが最大の問題 これって上の例え話に出てるもう一個予備の車を作るっていうのはやってたってこと? でも運用のミスでその予備の車は使えなかったってこと?
332 21/10/10(日)11:35:39 No.854812748
>RAID4はパリティを特定のストレージに書くので当然そこに負荷がかかるけど >そこを高耐久のにして乗り切るというのがある >というか富士通のストレージがそれ いやあるのは知ってたけど使ってる奴Fでも初めて見たって話 高耐久つってもこんなもんに使うHDDなんてもとよりぜんぶ高耐久だし単に故障要因作ってるだけでしょ
333 21/10/10(日)11:36:05 No.854812870
>>自分が交通事故起こしておいてメーカーには安全な車を作ってほしいって言ってるみたい >そりゃ上級国民だからな… 結局傷口広げるだけ広げて負けるやつじゃねーか
334 21/10/10(日)11:36:06 No.854812872
上が派閥争いに一生懸命で下への指示がクソ適当じゃクソの山しか出来んわな
335 21/10/10(日)11:36:11 No.854812896
>富士通ならだいたいサムスンじゃね? 他企業絡んでるとそれが通用しなかったり えらい人が急に知らんメーカー押し出したりして 勝手が効かなくて苦労する 何その独自仕様
336 21/10/10(日)11:36:11 No.854812897
前の会社のグループで派閥作ってたら合併した意味無くない?
337 21/10/10(日)11:36:11 No.854812899
結局 >2. 多摩副DBへの切り替えコマンドをうっかり飛ばす これがダメなんじゃないの?
338 21/10/10(日)11:36:28 No.854812986
>これって上の例え話に出てるもう一個予備の車を作るっていうのはやってたってこと? >でも運用のミスでその予備の車は使えなかったってこと? 車は並走してるが運転手が隣の車に移動しそこねた
339 21/10/10(日)11:36:40 No.854813038
>>HDDが壊れることは折り込みずみで >>同DC内に副DBが用意されてて切り替わるはずだったのに失敗したが最大の問題 >これって上の例え話に出てるもう一個予備の車を作るっていうのはやってたってこと? >でも運用のミスでその予備の車は使えなかったってこと? 予備の車に乗り換える際に予備の車のキーを忘れちゃって乗り換え失敗しちゃいましたみたいな感じ
340 21/10/10(日)11:36:53 No.854813099
壊れないハードディスクを使わないのはどうしてなんです?
341 21/10/10(日)11:36:57 No.854813113
>同じストレージ故障でもベンダーのせいにしない東証の社長は偉かったな 頑張って復旧させました!で乗り切れるくらいにはやらかしとは無縁なとこだしな… もう日常的に不具合あって慣れ切ってしまってると感覚壊れるね
342 21/10/10(日)11:37:02 No.854813129
>結局 >>2. 多摩副DBへの切り替えコマンドをうっかり飛ばす >これがダメなんじゃないの? それ以前に同ロットのハードディスク使いまくってるのも問題
343 21/10/10(日)11:37:24 No.854813226
どうしたらこの問題は解決するのかね…
344 21/10/10(日)11:37:33 No.854813268
東証もF
345 21/10/10(日)11:37:34 No.854813270
このままだと本当に取り返しのつかない事故起こしそう
346 21/10/10(日)11:37:35 No.854813277
>壊れないハードディスクを使わないのはどうしてなんです? んなもん無いからどこも運用でカバーしてる訳で
347 21/10/10(日)11:37:40 No.854813300
そもそも1人のうっかりで駄目になる構造自体がダメダメって言うか…
348 21/10/10(日)11:37:41 No.854813307
色んなことが重なってしまった事故だとは思うけど そんな運用なら遅かれ早かれ起きてましたよというのは間違いない
349 21/10/10(日)11:37:44 No.854813320
>>RAID4使ってる奴初めて見た >RAID4はパリティを特定のストレージに書くので当然そこに負荷がかかるけど >そこを高耐久のにして乗り切るというのがある 普通RAID5か6じゃねって話では?
350 21/10/10(日)11:37:53 No.854813366
>実際に現場で動いてる連中は高卒レベルの賃金だからじゃないですかね… 高給の専門家が来てくれないから 普通の人を10人雇いました! うん…電卓で頑張るならうまくいくかもね…
351 21/10/10(日)11:38:06 No.854813427
メガバンクが破綻したらどうなるんだろう
352 21/10/10(日)11:38:13 No.854813457
>壊れないハードディスクを使わないのはどうしてなんです? 石版か何かかな?
353 21/10/10(日)11:38:18 No.854813485
>そもそも1人のうっかりで駄目になる構造自体がダメダメって言うか… なんつーかこう…複数でチェックしなかったんすかね?
354 21/10/10(日)11:38:22 No.854813511
>東証もF ストレージはNetAppのOEMよ
355 21/10/10(日)11:38:25 No.854813527
RAID4とか見たことすらない…
356 21/10/10(日)11:38:31 No.854813551
ここは早いとこ解体したほうが世間のためだと思う
357 21/10/10(日)11:38:47 No.854813630
>壊れないハードディスクを使わないのはどうしてなんです? SSDにしよう >SSDにするとHDDのせいにできないからな…
358 21/10/10(日)11:39:10 No.854813728
>なんつーかこう…複数でチェックしなかったんすかね? ダブルチェックヨシ!でポーズだけとかになるのは目に見えてるな…
359 21/10/10(日)11:39:29 No.854813811
SSDは上書き回数があるから銀行システムには向いてなさそう
360 21/10/10(日)11:39:38 No.854813843
netappもpureも使ってるけど今回はストレージていうかDBサーバの話でしょう!…このぶんだとストレージの設計もガバガバだろうけど
361 21/10/10(日)11:39:52 No.854813901
>同じストレージ故障でもベンダーのせいにしない東証の社長は偉かったな あれはCIOが超優秀な人何だと思う もちろん意見を汲み取った社長もえらい
362 21/10/10(日)11:40:04 No.854813955
>DXとか言う前に下請け構造なんとかしろよ…とは思う 結局タスク分散とタスク管理が上手くいってないから完成?後にとっちらかるわけでな
363 21/10/10(日)11:40:20 No.854814026
>SSDは上書き回数があるから銀行システムには向いてなさそう その辺で売ってるSSDを使うとでも思ってんのか
364 21/10/10(日)11:40:30 No.854814069
仕方ない海外に頼むか…
365 21/10/10(日)11:40:33 No.854814085
他の銀行はちゃんと運用してるのにみずほだけグダグダって明らかに経営陣の責任では?
366 21/10/10(日)11:41:26 No.854814303
ぶっちゃけHDDが悪いSSDなら起きなかったとかそういう次元の問題じゃないでしょこれ
367 21/10/10(日)11:41:26 No.854814309
こういうこと続くととりあえず安心安全の国内ベンダでっ!てのも減ってくんだろうな LINE銀行もみずほ主導で進めてた時はF想定だったけど結局基幹は韓国のになったし…
368 21/10/10(日)11:41:35 No.854814346
>普通RAID5か6じゃねって話では? RAID5じゃ今回のは乗り切れなくね?
369 21/10/10(日)11:41:51 No.854814427
SASのHDDなんてたかだか1本10万円程度なんだからケチってんじゃないよ
370 21/10/10(日)11:41:57 No.854814456
>こういうこと続くととりあえず安心安全の国内ベンダでっ!てのも減ってくんだろうな これは富士通悪くねえよ! みずほの問題だよ!!
371 21/10/10(日)11:42:17 No.854814535
>>こういうこと続くととりあえず安心安全の国内ベンダでっ!てのも減ってくんだろうな >これは富士通悪くねえよ! >みずほの問題だよ!! みずほからしたら富士通におあしすすることで全て解決だし…
372 21/10/10(日)11:42:20 No.854814545
SSDならどうのって頭みずほかよ
373 21/10/10(日)11:42:22 No.854814556
>ぶっちゃけHDDが悪いSSDなら起きなかったとかそういう次元の問題じゃないでしょこれ でもみずほはHDDが悪いって…
374 21/10/10(日)11:42:27 No.854814575
人間が悪い
375 21/10/10(日)11:42:37 No.854814618
RAID6にスペア乗せとけば少なくとも2本こけても稼働するのにね リビルドに24時間かかっても多分…大丈夫だったはず
376 21/10/10(日)11:42:41 No.854814639
>人間が悪い 俺は悪くねぇ
377 21/10/10(日)11:43:05 No.854814749
>>普通RAID5か6じゃねって話では? >RAID5じゃ今回のは乗り切れなくね? その通りだけどいずれにしても4にはせんやろって話だよ 本当にしてたならなかなか攻めたというか意図が読めない構成だなって
378 21/10/10(日)11:43:40 No.854814887
>なんつーかこう…複数でチェックしなかったんすかね? 多分チェックはしてるけど内々で済ませたんだろう上の顔色見ながら 結果として 「ヨシ!」 「ヨシ!」 「ヨシ!」 の繰り返しで終わる
379 21/10/10(日)11:43:40 No.854814890
>8月23日や先月8日に100台以上のATMが一時停止したケースではネットワーク機器に静電気などが生じエラーが発生した可能性が高いということです。 残念ベンダーの一次回答例 類似回答 宇宙線の影響
380 21/10/10(日)11:43:50 No.854814939
>それ以前に同ロットのハードディスク使いまくってるのも問題 同じタイミングに同じメーカーで作られたHDD使ってて「同時に故障する可能性は低いです!」は見通しが甘いんだよな……
381 21/10/10(日)11:43:58 No.854814979
>>ぶっちゃけHDDが悪いSSDなら起きなかったとかそういう次元の問題じゃないでしょこれ >でもみずほはHDDが悪いって… 誤魔化した報告には誤った対処がなされる典型的な例