最高のシステム管理者WTF？

あなたは必ず自分の目でそれを目撃した（またはしようとしている）、遅かれ早かれ：何かが得た恐ろしいプロジェクト/システム/状況というSOめちゃくちゃあなたはちょうどそれが行ったように、それは実際に行ってきました信じることができません。

管理ミス？予算不振？誤解？馬鹿げた、無知なだけ？あなたの原因に名前を付けてください、それは確かに起こりました（そして、悲しいことに、多くのことを続けています; ここを見てください）。

ここでは、娯楽（多少皮肉な種類ですが）と学習（できれば）について説明します。

いくつかのルール：

• これはランダムな（完全に破壊的であっても）管理エラーの場所ではないので、「arg -r誤入力したrm -r」や「OMG Iちょうどコピーした破損したデータベースを最後の良好なバックアップにコピーした」（そこに行った） ; ここのほうがいいです。これは、「このシステムを設計/実装した人の影響下にあったのはどのような種類の薬ですか？」です。
• 投稿ごとに1つのWTF。したがって、適切にコメントを取得できます。
• 実際に目撃したものを投稿してください:-)
• それをしたのがあなただった場合、それはまだ資格があります:-)

すぐに資料を追加しますので、自由に追加してください。してください:-)

報告された問題に対するマイクロソフトのサポートエンジニアからのメール応答：

「あなたの問題についての私の意見では、 一言：WEIRD。」

ゴールド！

私は以前に聞いたことのない会社から呼ばれました。これは、顧客向けのExchange 2003メールサーバーの実装を担当しており、その方法についてまったく手がかりがありませんでした。奇妙なことは何もありませんよね？私はフリーランスのコンサルタントとして働いているので、あなたがあなたのためにどうしたらいいか分からない仕事をするのは完全に大丈夫です（そしてそれのためにあなたのお金を得る）。

そこで、私は顧客のサイトに行き、かなり奇妙なものを発見しました。ネットワーク内のすべてのサーバーはドメインコントローラーでした。全部で15ほどです。

それから私はさらに奇妙な何かを発見しました：それらのどれも他の人と適切に複製していませんでした。人類へのエラー。

それで、サーバーのネットワーク構成を見て、見ました... ISPのパブリックDNSサーバーを使用していました。それから私は別のサーバーを見ます...そしてそれは同じでした。それからDCを見て...同じこと。その後、私は尋ねました...そして、それは公式に確認されました：ネットワーク上のすべてのコンピューター（約1500）が正当なドメインコントローラーの代わりにISPのDNSを使用していました。

DNSが適切なActive Directory操作に非常に重要であるという説明を進め、バックストーリーを再構築することができました。

• 誰かが最初にADドメインを正しくセットアップし、DCをすべてのコンピューターのDNSサーバーとして使用しました。
• 彼/彼女/それはフォワーダーやファイアウォール設定について何も知らなかったので、コンピューターはインターネットのパブリック名を解決できませんでした。
• そこで、ISPのDNSサーバーをコンピューターで使用するというアイデアが生まれました。彼らは彼ら全員にそれを設定しました。
• 「ドメインコントローラーが見つかりません」というエラーが多く発生し始めました（だれが推測したでしょうか？）。
• 彼らは問題が十分なDCを持っていないことが原因であると考えたため、すべてのサーバーをその役割に昇格させました。
• 言うまでもなく、これらの新しいDCも間違ったDNSを使用したため、これは事態を悪化させただけであり、複製することもできませんでした。
• これは何ヶ月も続きましたが、まったく信頼できないネットワークに「慣れました」。
• さらに、Exchangeセットアップを起動しようとしましたが、これは惨めにクラッシュしました。それから彼らは外部コンサルタントに電話することに決め、彼らがネットワークの設定にまったく間違いを犯すまで全く手掛かりがなかった。

むかしむかし、電子医療記録を持つ小企業（10人）のクライアントがいました。（医師ではありません）。ある日、バックアップが失敗していたことに気付きました。テストでは、テープドライブはまったく機能していませんでした。私はこれをオーナーに言いました。オーナーは、ドライブが悪いことをよく知っているが、交換するには高価すぎると言いました。

確かに-それはあまりWTFではありません。

WTFは、彼のスタッフにテープを毎日回転させ、セーフティボックスに運んでもらい、それがなくなってから6〜9か月間すべてのジャズを演奏したことです。

「スタッフに言わないで、心配するかもしれない」

私は大きな政府機関（イタリア政府の主要機関の1つ）のシステム管理者として働いていて、数か月間データセンターを管理していました。：ある晩、私の電話が鳴ると、私の上司は私に非常に悪いが起こっている何かを伝える総停電を。

OK、UPSがありますよね？

はい、しかしそれらは長続きしません、従ってそこに行き、力が戻るまですべてをシャットダウンした方がよい。

私はそこに行き、暗い廊下を通り抜け、サーバールームに到着します...そして純粋な地獄としか言いようのないものに迎えられます。文字通り。部屋はとても暑かったので、ケーキを焼くことができました。UPSの電源は問題ありませんでしたが、サーバーの半分はすでに過熱からシャットダウンしており、残りのサーバーは苦痛の叫びをあげていました。

理由？

サーバーはUPS電源で動作していました... 空調はそうではありませんでした。

HP ProLiant ML370 G3ファンの障害...このモデルのマザーボード上のファンセンサーは、5年後に不良になる傾向がありました。間違ったファンの組み合わせが検出されない場合、サーバーは起動できません。shop-vacでマシンをジャンプスタートさせる（ブート時にファンを回転させる）ために顧客を案内する必要がありました。これが、新しいシステムで到着するまでサーバーを稼働させ続けた方法です。

私はかつてDac-Easy会計の会計ソフトウェアコンサルタントでした。地元のビジネスのメインオフィスに呼び出されたときに、会計士から、プログラムが毎週末に会計エラーでいっぱいだった理由を解決できなかった場合、別のアプリケーションとコンサルタントを見つける必要があると言われました。管理ログファイルを調べてみると、すべてのエントリが通常金曜日または土曜日の夜に作成されていることがわかりました。次に、所有者の妻が、PC Anywhereを使用して自宅から会計システムコンピューターにログインし、ワインを数杯飲んだ後に小切手帳と口座の残高を調整しようとしていることがわかりました。数値が適切に見えたら、彼女はログオフします。

内部でガタガタ音がするのを聞いたときに、親会社のオフィスから受け取ったコンピューターを持ち上げました。ケースを開けると、Frosted Mini-Wheatsで1/2になっています。私はマウスがその中に住んでいるか、フードキャッシュを使用していると考えています。おそらくエントリーポイントは、ケースとDINキーボードジャックの間の隙間でした。

まさにあなたが求めたものではなく、明確なWTF。

別の顧客、別のホラーストーリー。

メインの投稿で、破損したデータベースで適切なバックアップを誤って上書きしたことについて説明しました。それが起こる:-(

そのため、バックアップからの復元が必要になりました。幸いにも、実際にそこにWASがバックアップ：それは、それに添付本当に大きなテープライブラリと中央のバックアップサーバ上で、毎日行われていました。このサーバーは会社全体のバックアップを管理していました。本当に高価で、Real Backup Softwareがインストールされていました。

ここまでは順調ですね。バックアップジョブを検索し、適切なテープをロードし、復元操作を開始し、テープがロードされ、復元が開始されますが、何も起こりません。

もう一度やり直します。

アンロード、リロード、再起動、以前のバックアップの復元を試行します...何も変わりません。

長時間の操作が行われていると想定し、一晩中そのままにしておきます。翌日、それでも何も変わりません。

わかりました、Real Backup Softwareベンダーのサポートに電話する時間...しかし、それはできません、我々は日曜日です。ベンダーのサポートサイトを調べてみますが、特別なアクセスコードが必要です。1人のマネージャーのみがそれを持っています。

もう1日苦労しましたが、バグはよく知られていますが、ベンダーのパッチで修正されました。だから、私はそれを適用しようとします...しかし、それはできません。ベンダーは、パッチが安全に適用できることをベンダーが確認しない限り、何かを壊す危険を冒したくありません。バックアップサーバーが何も復元できなかったという事実は、明らかに「壊れた」ようには見えませんでした。

合計4日後、さまざまなサポートコールとサポートエンジニアを現場に派遣したベンダーがようやくパッチを適用し、バックアップを復元することができました。バックアップサーバーはいなかったEVER復元を行うことができて、誰もが気づいていないので、誰も、それをテストしていません。

楽しさと利益のための端末エミュレーション

私は古いシステムで作業しています。本質的には、Unixボックスに接続する多数のテキスト端末であり、いくつかのWindowsコンピューターが物事を複雑にするために投入しています。

いくつかの重要な背景情報

• プライマリソフトウェアアプリケーションは、独自の拡張termcapファイルを使用します。システム全体のtermcapとterminfoは無視されます。
• 主なソフトウェアアプリケーションでは、環境変数に応じてさまざまなキーボードマッピングを選択できます。
• すべてのテキスト端末には、プログラム可能なキーボードがあります。
• Windows PCは、主要なソフトウェアアプリケーションによるサポートが組み込まれていない独自のクライアントソフトウェアを使用して接続します。
• 独自のクライアントソフトウェアにより、ロード時にさまざまなキーボードマッピングを選択できます。
• 標準のQWERTYレイアウトを使用しているスタッフは半数のみです。
• このシステムに携わったシステム管理者のうち少なくとも1人、おそらくそれ以上が、端末エミュレーションの適切な理解を欠いていました。

私はこれでどこへ行くのかを見ることができると思います。

terminfoファイルとtermcapファイルに適切な端末サポートを追加するという中途半端な試みがありましたが、これらは部分的にしか機能しません。プライマリシステムアプリケーションで使用される独自のtermcapファイルは機能しますが、$ TERMはとにかく適切に設定されないため、ほとんど関係ありません。

ログインするには、各ユーザーは基本的に、ログインする場所と使用するキーボードレイアウトを選択する必要があります。自動検出は含まれません。これにより、クライアント側でどの端末が使用されているかにかかわらず、$ TERMがANSIに設定され、プライマリソフトウェアアプリケーションがキーの一部を適切に再マップするように環境変数が設定されます。

テキスト端末で埋め込みキーボードレイアウトを使用しているユーザーの場合、スクリプトを実行して、一部のキーを（キーボード自体に物理的に印刷された）埋め込みレイアウトに再プログラムしますが、すべてではありません。Windows PCでは、クライアントキーマップがロードされ、ほとんどのファンクションキーがANSIに再マップされます。すべてを再マップすることはできません。そうしないと、他のキーの一部が機能しなくなります。

いずれかの端末から他の何かにログインすることは失敗の練習であり、サーバー自体で直接合理的にのみ実行できます。すべてが機能するため、修正に必要な時間と労力を正当化することは困難です。しかし、私たちが今立ち往生している20年前のテキスト端末よりも新しいものを追加するには、本質的にシステム全体を書き直す必要があります。

私はそれを見るたびに少し泣きます。

すべての.exeを1つのフォルダーに入れて、コンピューター上のファイルを再編成することを決めた人を知っていました。

〜60（SIXTY）PCのネットワーク。

セキュリティマニアのボス。

VLAN機能を備えたいくつかの新しいスイッチ。

〜20（TWENTY）VLANを含む「ネットワーク再編成計画」。

未知の高次の力のおかげで、これらすべてが実際に始まる前に私は去った...

Unix管理者の1人にWindowsボックスを提供しました。これは、WindowsオペレーティングシステムにLinuxボックスを管理者に与えて、さまざまなオペレーティングシステムで使い慣れるようにした直後です。私はWindows管理者としてLinuxボックスを台無しにしようとはしなかったので、Unixチームにたくさんの質問をしました。これが演習の目的だったと思います。すべてのボリュームを適切なサイズに設定し、1つのボリュームまたは単一のパーティションにすべてを配置しないことについて厳しい講義を行った後、2年後も稼働している完全に適切なボックスを構築しました。

さまざまなボリュームについて講義し、フルディスクがOSをクラッシュさせることがないように物事を構築していないUnixの男がWindowsボックスを構築したとき、彼はすべてをC：に置きました。「私たちが持っているポリシーでそれをバックアップすることはできず、それらのログがいっぱいになるとあなたのボックスはクラッシュします」と言ったとき。彼は「まあ、それはWindowsだと思っていた。C上のすべてが理にかなっている」と言った。 彼は別のパーティションを作成しませんでした。私はこれに真剣に動揺していた。絶対に、WTFはある種のことを考えていました。どうやら、いくつかのベストプラクティスがOSに関係なく同じであるということは彼には発生しなかったようです。

Massimoの返信は、別のWTFを思い出させます...

小規模オフィスには、Exchange、Symantec AVなどを備えたWindows 2003サーバーがあります。会社は通常、すべてのIT作業に当社を使用しています。しかし、この新しいホットショットはオフィスにあり、新しいPCを購入しました。統合されたDell Optiplexプラットフォームでそれらを使用し、この男は3つをBest Buyで販売されていた「素晴らしいマシン」に置き換えることにしました。

とにかく-彼らはどういうわけかそれをドメインに参加させることができます。

最初の呼び出し：

見通しが見つかりません。マシンにはWord（Microsoft Works）が付属していたので、他のすべてはどこにありますか。

2回目の呼び出し：

ネットワークアンチウイルスはどのように使用しますか？

これがwtfです。私は現場に行きましたが、クライアントをインストールする代わりに、7台のマシンがSymantec Antivirus SERVERSとして構成されていました。どうやら紳士は、クライアントの設定をロックしたことを好まなかったようで、スキャン時に変更できるようにクライアントを「再インストール」することにしました。どうやら私たちが取り残したSymantec AVの最初のCDは、どういうわけか彼にクライアントではなく「サーバー」をインストールするよう説得しました。

クライアントがサーバーのビルドを支援するために私に電話をかけてきました。ビルド中に、これらはラックの下部2台の交換サーバーであることが通知されました。ラックの位置が関連しているのは奇妙だと思い、理由を尋ねました。真ん中を通る水道管が破裂した後、サーバールームが浸水したことが判明しました。

それで、あなたが尋ねるサーバールームの真ん中で水道管は何をしていますか？さて、女性用のバスルームは隣にあり、サーバールームは便利です。メインフィードをトイレに置くのに最適な場所は何ですか？

ああ、これは簡単なものです...

ケンタッキー州の田舎の倉庫にある会社にLinuxシステムをインストールしました。このシステムは、組織の会計/在庫アプリケーションです。1998年のSCOサーバーを新しいCentOS 4サーバーに置き換えました。その結果、接続性とクライアントに関しては最悪の事態を予想していました。ご存知のように、古いPC、配線不良など、新しいスイッチ、ケーブル、シンクライアントなどをサイトに発送しました...

しかし、配線「クローゼット」がバスルームにあるとは思っていませんでした！実際、ケーブル配線は倉庫のトイレの真上にある吊り天井の上のスペースにありました。これには、DSLモデム、10メガビットHUB、および電話用の66ブロックが含まれます...

DNS From Hellの事に関与した同じ顧客。

Exchangeサーバーは何年も正常に動作し続け、一部のディスク障害（感謝、RAID、そしてバックアップのおかげ）にも耐えました。ある日、私は関係のない問題のために再び呼び出され、彼らが私に言ったアンパッサンそれらを悩また何か：いくつかの時間前に、彼らは誰もが他のオープンすべての人のメールボックスにできた発見しました。彼らはそれが奇妙だと思ったが、それを修正する方法がわからないため、何もしなかった。とにかく電子メールは機能しており、（ほとんど）誰もこれを発見していなかった。

私はここで非常にショックを受けました：誰もが他の誰かのメールボックスを開くことができました、そして、彼らはこれがほんのわずかな迷惑だと思い、3ヶ月間何もしませんでした。普通の人なら誰でもすぐにサーバーからネットワークコードを引き抜いたでしょうが、そうではありません。

問題の原因は...奇妙です。誰かがActive DirectoryのExchange組織レベルで「全員/フルコントロール」を設定したため、全員がすぐに完全なExchange管理者になりました。彼らの唯一の幸運は、それに気づいた人がほとんどいなかったことです。

今日現在、誰が実際にそれを行ったかはまだ誰にもわかりません。

医師のオフィスアカウンティング（読み取り：顧客請求および保険金請求）ソフトウェアを作成する小規模企業のフルタイムプログラマーおよびパートタイム管理者として働いた。大規模な顧客から、サーバーがダウンしているという電話を受けました。Altos Unix SysV / 386を実行する新製品でした。私は彼らが持っていたので、彼らは私と新しいギャルを送った。

そこに着くと、できる限り速くWordPerfect文書を入力するデータ入力オペレーターでいっぱいの部屋がありました。別のオペレーターのセットが同じことをしている状態から出て行く長距離回線がありました。

ドキュメントディレクトリには、約10,000ワードの完全なドキュメントがあり、それらはすべて同じ形式に従っています。1つのディレクトリにすべて。まあまあ負傷し、そういうものに苦しんでいます。この医師は、傷害訴訟を起こす弁護士の頼れる男だったようです。

私はフロッピーからブートしようとしましたが、たくさんのノイズを探しました。私はフロッピーを引き出し、クモの巣で完全に覆われていました。ここで一握りの話をしています。それは診療所だったので、綿棒とアルコール（私たちが持っていた唯一のUnixブートディスクであり、そのサービスコールで問題を修正する唯一の機会でした）を要求し、フロッピー、ドライブ、サーバーのクリーンアップを開始しました。

2つの問題がありました。1つは、サーバーがカーペット敷きのオフィスとその部屋の隅（厚いプラッシュパイルカーペット）からの汚れでいっぱいで、80度のオフィスで過熱していたことでした。ファイルシステムには深刻なFSCK処理が必要だったので、10Kファイルを新しいアルファベット順のサブディレクトリのセットに分割し、さらに分解することを提案しました。

医者は私たちがドアに来たときに私たちに新しいものを破った完璧な穴でした。辞めたときに、WordPerfect for UNIXオプションを購入しても、大陸内のドキュメントを作成できるようにサーバーのサイズを決めたわけではないと説明しました。また、A / C、カーペットのないサーバーの場所、UPS、外部RAID、およびより優れたディレクトリファイルプロトコルが必要でした。これが彼がすべてのお金を稼いだ方法だったので、突然彼はすべての耳でした。私はすべての情報を営業に伝えましたが、その後すぐに他の理由でその仕事を辞めました。

私の最高のWTFは、私が最初にここで仕事を始めたとき、現在の雇用主から生まれました。

私がサーバーの状態を発見したとき、仕事の最初の数ヶ月はほとんどパニックとあからさまな恐怖の絶え間ない状態に関係していました。私の現在の経験レベルでは、その場所に火をつけて保険を徴収することをお勧めしたかもしれません。しかし、非常に優れた部分は1つの企業ポリシーでした。

ダイヤルアップの顧客の会計はありませんでした。収入の半分をダイヤルアップ顧客から得たISPで。これは実際、私が始めた頃までに約6年にわたって実施されていたポリシーであり、それについて何も実行されていなかったということを思い起こさせました。標準的なラインは、「私たちは、顧客が使いすぎないように信頼しているだけです。場所がわずかな予算で運営されていて、その間ずっと実際の管理者がいなかったという事実は、私が考えていない問題の助けにはならなかった。

もちろん、このポリシーの最終結果は、スパマーが基本的にダイヤルアッププールを指揮したことです。ほぼ毎晩、プール全体が一杯になるまで1つのアカウントを使用して複数のモデムにダイヤルインし、できるだけ早くスパムを排除していました。AAA RADIUSのバージョンは、「一度に1人のユーザーのみを許可する」切り替えが一度もなかったという点で問題を解決しませんでした。私はPerlで何かを一緒にハックして、RADIUSサーバーを交換できる時まで2回のログインでだれかを切断しました。他の問題の一部は、私は同時に技術サポートも行っていたため、物事を修正するのに十分な時間を与えられなかったことでした（靴紐の予算を参照）。しかし、私がまだここにいる理由の一部は、私がすべてを自由に統治していたことです。私はそうは思わない 進まないで、適切なアイデアを実装しないように言われたことがあります。私が今まで持っていた唯一の制限はお金でした。

10年前、私は、プライマリサーバールームのケーブル配線がスパゲッティスープのように見える会社についてインタビューしました。ネットワーク機器は、20フィートx 60フィートの部屋の1つの角の近くにある3つのラックにありました。さまざまな種類のネットワークケーブルのカスケードがラックを転がり落ち、幅約7フィートの絡み合ったケーブルのプールで終わり、ラックから約5フィートに溢れ出ていました。ドキュメントはなく、何がどこに行くのか誰も知りませんでした。

同社は、生命と財産の安全を扱う分野で95％の市場シェアを獲得しました。私が言えることは、それが本当の休止を与えることができるということだけです。

ところで、同社はまだ事業を営んでおり、明らかにそれ以来多くのことを片付けてきました。

Demarcクローゼットの中にいたのはそれほど前ではなく、サイトでこの甘いセットアップを見つけました。

エリートファイバーケーブルのインストール= TWIST TIE

代替テキストhttp://locobox.googlepages.com/Fiber.jpg 代替テキストhttp://locobox.googlepages.com/Fiber2.jpg

数年前、私が働いていた会社は競合他社の1つを買収しました。そのマシン（Centos）を監査して、構成に関して標準を満たしていることを確認する必要がありました（システム管理者は、ターンキーソリューションを開発した彼自身の会社を設立することを支持します）。

/etc/rc.local（すべての素晴らしいWTFのホーム）で私は見つけました：

swapon /dev/sda3

そして

route add -net 10.0.0.0 netmask 255.255.0.0 eth1

注：eth1は、255.255.255.0のネットマスクでifcfg-eth1で構成されました

どうやら実際のシステム管理者は/ etc / fstabや/ etc / sysconfig / network-scripts / *のような設定ファイルを使用していません

今年初め、私たちは新しい女の子を雇いました。会社のすべてのフォントが彼女のコンピューターにインストールされていることを確認するように求められました。私は彼らがそうであったことを知っていたが、私の戦いを選び、再びそれらをインストールすることに決めた。約5分後に少女から電話がかかってきたので、彼女は私に来て、私がインストールした新しい「ソフトウェア」の使い方を見せてほしいと言った。私は歩いて、Wordを開いて、フォントを変更する方法を説明しました。

この少女はPHDを持っていました!! 彼女はもうここでは働いていませんが、フォントの使い方を知らなかったからではありません。