絶望から希望まで：小盟の驚きは168時間。

今回の「天災」を免れることができましたが、思いがけず「人災」はこの上ない苦しい立場に置かれました。2月27日、同盟創設者の孫波勇さんがこの言葉を発した時、微盟は会社の歴史上最大の危機に直面しています。

2月25日、香港交易所で発表されたマイレージ公告は、2月23日19時以降にSaaS業務の生産環境とデータが破壊されたと発表しました。

この部分のデータが戻ってこないと、同盟に対する影響は想像できません。2013年に創立された微盟は、2019年1月に香港交易所に上陸し、その2019年中期の決算によると、SaaS業務の収入は微盟の総収入33.4%を占め、粗利益は48.5%を占めている。

実は、今回会ったのは従業員の誤操作によるデータの紛失ではなく、一回の人為的な破壊です。以前、ある複数の業界関係者は記者に対し、このような大規模なデータを完全に回復することは不可能だと言いましたが、提携は幸運です。データがなくなってからデータが戻ってきました。盟は驚きの168時間を経験しました。

データが消える

2月23日午後6時過ぎ、マクロサーバから故障報告があり、検査したところ、すべてのサーバーがサービスに対応できない状態にあることが分かりました。続いて、技術者はサーバーの一つを再起動しましたが、システム内のすべてのデータがなくなりました。

「この時はすでに非常に緊張しています。サーバーは大面積で故障しています。二つの原因があります。一つは侵入されたこと、もう一つは故意に破壊されたことです。」騰訊雲運維センターと顧客サービス部門の責任者の徐勇州氏は言う。

騰訊雲は直ちに二つの業務線を同時に手配して、もう一つの線はサーバーチームで、彼らはサーバーに対して検査を続けて、最終的に確定して、微盟サーバー上のすべてのファイルは全部なくしました。もう一つの線は安全チームです。彼らは微盟の技術者と協力して、許可されたアカウントをデータベースに入れて削除操作を行ったのです。

技術の仕事をする人は時々冗談で「rm-rf/*」と言っています。これはLinuxシステムのファイル削除命令です。システムとデータを含むすべてのファイルを削除して、回復できません。

そして、この黒スワン事件に遭遇したのです。データベースが削除されているほか、バックアップしているサーバーも登録できないということです。バックアップデータも一緒に削除されるということです。会社の核心となる運営・維持社員が関連業務データを削除したからです。

データの回復は非常に専門的な分野です。普通は企業が主導して、雲メーカーが協力します。しかし、同盟は当時もう方法がありませんでした。騰訊雲に頼るしかないです。

「数百Tのデータは、バックアップまで削除されています。短い時間で回復したいです。いくつかのデータ復旧会社に問い合わせましたが、いずれもこの状況が20%ぐらい回復するといいですね」と話しています。徐勇州が率直に言う。

緊急救援

通常、データ復旧の仕事は三つの段階に分けられます。第一歩は、損傷面を制御することです。これはデータを取り戻す機会があるサーバーに問題がないようにすることです。第二ステップは専門ソフトでデータを探し出すことです。第三ステップは、会社のデータ検証、オンライン接続などの操作です。

その中で一番大切なのは前の二歩です。前の二歩がうまくいけば、データも無事に探し出せます。今回の提携のデータを探し出す仕事も、基本的にはこの流れに沿っています。

徐勇州によると、まずソースデータのコピーを行い、ソースデータを保護するという。しかし、同盟の状況を分析することによって、彼らは伝統的なネットワークの拷問やハードウェアの拷問にも、時効性と安全性には満足できないと考えています。

そこで、騰訊雲チームは大胆な決定をしました。鏡像コピーのステップを超えて、もう一つのシステムディスクを元のサーバーにインストールし、OSとデータ回復ソフトを新しいシステムディスクにロードして、直接にサーバをスキャンします。

「操作をする時、多くの同僚が現場に着けなくなりました。私達のグループはビデオを通して接続し、前方の各ステップの操作を確認しました」と徐勇州は回想しています。全体の過程はとても緊張しています。これは不可逆的な過程で、間違ったステップは全部挽回できません。

幸い、最後にはパニックが発生しました。ソースデータの読み取りは順調に終わりました。次の挑戦はデータ抽出です。2月26日、騰訊雲チームは第一ロットのデータを取得し、導入検証後も正常で、これは彼らを非常に興奮させ、勝利の間近を感じさせます。これらは2月17日までのデータです。このデータが完全であっても、一週間のデータが失われています。

チームの気持ちはすぐにまた谷底に落ちました。しかし、実際には、前の一連の操作によって、データがまだ存在していることが証明されました。

そこで、騰訊雲チームはまた新たに「引き上げ」案を制定しました。今回、彼らはデータ会社の回復方案によって、ディスクの各ブロックをスキャンすることを決定しました。それと同時に、テンセントクラウドチームはBプログラムを制定しました。即ち、サーバーのOS層からデータを引き揚げます。

B計画は予備案で、膨大な量の試みとデータ検証が必要で、時間がかかります。B計画を採用する必要があると、同盟のデータは予想通りに完成できなくなります。具体的な時間も確定しにくいです。」徐勇州説

幸いにも、最初のサーバーの最初の「ブロック」はスキャンに成功しました。入手したデータの経験証も完全です。これはプロジェクトAでいいと説明します。ただし、この方法で得られたデータのサイズは、いずれも小さいです。これは狂った巨大なジグソーパズルのように、完全なデータを得るためには、スティッチングが必要です。

「データが大きいほど、つなぎ合わせるのが難しいです。しかし、良いことに、バックアップ体制が完備していて、データの種類も比較的に統一されています。最後に一連の技術手段を通じて、ついにスティッチング作業を完成しました。徐勇州説

3月2日、共同コミュニケーションズは、2020年3月1日午後8時までに、テンセントクラウドの協力のもと、会社のバックアップのデータが戻ったと発表しました。3月2日午前2時から午前8時までデータ復旧オンライン演習を行い、3月2日午後10時から3月3日午前9時まで、数据回復オンラインを行います。

3月3日午前、提携は2020年3月3日午前6時までに、会社のSaaS業務のデータをオンラインで再開したと発表しました。

警鐘を鳴らす

データがなくなって、マクロ同盟の損失が大きいです。2月25日に正式に発表されたデータがなくなった後、提携の株価は3日間連続で大幅に下落しました。6.18香港元から一度4.8香港元まで下落しました。事業者に対して、微盟は1.5億元の賠償資金を用意し、現金賠償と流量賠償の二種類の賠償方式を提供しました。

ある情報セキュリティ専門家は記者に対し、人為的な要因として、現在はすでに企業のデータセキュリティ問題の最も主要な原因となっており、一部の従業員の誤操作によって、サーバーが崩壊したり、核心データベースが削除されたりしました。

この問題に対して徐勇州は記者に対し、企業のデータセキュリティはどの単独戦略に頼るべきかではなく、完備したシステムが必要であり、各環節は油断できないと述べました。従来のデータ管理に比べ、クラウド上ではデータの安全性がより保障されます。

例えばクラウドアカウント管理権限の管理を通じて、企業に口座下の資源に対するアクセス権限を粒度コントロールできます。例えば、あるサブアカウントにはあるCOSメモリバケツの読み取り権限しか持たないことができます。他のアカウントにはそのCOS記憶対象の書き込み権限があります。これによって、誤操作や不必要操作によるデータの破損、紛失のリスクを大幅に低減できます。