sysadmin ที่ดีที่สุด WTF?

คุณแน่ใจหรือร่วมเป็นสักขีพยานด้วยตาของคุณเอง (หรือจะ) ไม่ช้าก็เร็ว: น่ากลัวว่าโครงการ / ระบบ / สถานการณ์ที่บางสิ่งบางอย่างได้ดังนั้นเมาขึ้นคุณก็ไม่สามารถเชื่อว่ามันจริงไปเช่นนั้นได้

การจัดการไม่ดี? Misbudgeting? เข้าใจผิด? แค่โง่เขลาธรรมดา? บอกสาเหตุของคุณให้แน่ใจว่าเกิดขึ้น (และยังคงเกิดขึ้นมากมายเศร้าดูที่นี่ )

อธิบายที่นี่เพื่อความสนุก (แม้ว่าจะเป็นคนที่ชอบเยาะเย้ย) และการเรียนรู้ (หวังว่า)

กฎบางอย่าง:

• นี่ไม่ใช่สถานที่สำหรับข้อผิดพลาดของผู้ดูแลระบบแบบสุ่ม (แม้ว่าจะร้ายแรงที่สุด) ดังนั้นโปรดหลีกเลี่ยง "argh I พิมพ์ผิด rm -r" หรือ "OMG I เพียงคัดลอกฐานข้อมูลที่เสียหายไปก่อน" ; สิ่งเหล่านั้นจะดีกว่าที่นี่ สิ่งนี้เกี่ยวกับ "ยาประเภทใดที่อยู่ภายใต้อิทธิพลของผู้ออกแบบ / ใช้ระบบนี้"
• WTF หนึ่งโพสต์ต่อการโพสต์เพื่อให้พวกเขาสามารถแสดงความคิดเห็นได้อย่างถูกต้อง
• กรุณาโพสต์สิ่งที่คุณเห็น :-)
• ถ้าคุณเป็นคนทำมันก็ยังคงมีคุณสมบัติ :-)

ฉันจะเพิ่มเนื้อหาเร็ว ๆ นี้อย่าลังเลที่จะเพิ่มเนื้อหาของคุณเอง และโปรดทำ :-)

การตอบกลับทางอีเมลจากวิศวกรฝ่ายสนับสนุนของ Microsoft ไปยังปัญหาที่รายงาน:

"เท่าที่ความเห็นของฉันเกี่ยวกับปัญหาของคุณฉัน มีหนึ่งคำ: WEIRD"

ทอง!

ฉันถูกเรียกจาก บริษัท ที่ฉันไม่เคยได้ยินมาก่อนซึ่งได้รับมอบหมายให้ติดตั้งเซิร์ฟเวอร์จดหมาย Exchange 2003 สำหรับลูกค้าและไม่มีเงื่อนงำเกี่ยวกับวิธีการทำ ไม่มีอะไรแปลกเกินไปใช่มั้ย ฉันทำงานเป็นที่ปรึกษาอิสระดังนั้นฉันจึงทำงานได้อย่างสมบูรณ์แบบที่คุณไม่รู้ว่าจะทำอย่างไรเพื่อคุณ (และรับเงินของคุณ)

ดังนั้นผมจึงไปที่เว็บไซต์ของลูกค้าและค้นพบสิ่งที่แปลกมาก: ทุกเซิร์ฟเวอร์เดียวในเครือข่ายเป็นตัวควบคุมโดเมน ; ทั้งหมด 15 หรือมากกว่านั้น

จากนั้นฉันก็ค้นพบบางสิ่งที่แม้แต่คนแปลกหน้า: ไม่มีใครทำซ้ำอย่างถูกต้องพฤติกรรม Active Directory โดยรวมสามารถอธิบายได้ว่า "เอาแน่เอานอนไม่ได้" ผู้ใช้มีปัญหาเกี่ยวกับเครือข่ายใด ๆ ที่คุณสามารถจินตนาการได้ ข้อผิดพลาดต่อมนุษยชาติ

ดังนั้นฉันจึงดูที่การกำหนดค่าเครือข่ายบนเซิร์ฟเวอร์และฉันเห็น ... มันกำลังใช้เซิร์ฟเวอร์ DNS สาธารณะของ ISP จากนั้นฉันก็ดูเซิร์ฟเวอร์อื่น ... และมันก็เหมือนกัน จากนั้นฉันก็มอง DC ... เหมือนกัน จากนั้นฉันก็ถาม ... และได้รับการยืนยันอย่างเป็นทางการ: คอมพิวเตอร์ทุกเครื่องในเครือข่าย (ประมาณ 1,500) ใช้ DNS ของ ISP แทนตัวควบคุมโดเมนที่ถูกต้อง

ฉันดำเนินการอธิบาย DNS ค่อนข้างสำคัญสำหรับการดำเนินการ Active Directory ที่เหมาะสมและสามารถสร้างเรื่องราวย้อนหลังใหม่ได้:

• ตอนแรกมีคนตั้งค่าโดเมนโฆษณาอย่างถูกต้องโดยใช้ DC เป็นเซิร์ฟเวอร์ DNS สำหรับคอมพิวเตอร์ทุกเครื่อง
• เขา / เธอ / มันไม่รู้อะไรเกี่ยวกับการส่งต่อและ / หรือการกำหนดค่าไฟร์วอลล์ดังนั้นคอมพิวเตอร์จึงไม่สามารถแก้ไขชื่อสาธารณะทางอินเทอร์เน็ตได้
• แนวคิดของการใช้เซิร์ฟเวอร์ DNS ของ ISP มาในคอมพิวเตอร์คือ พวกเขามีการกำหนดค่าบนทุกคนของพวกเขา
• พวกเขาเริ่มมีข้อผิดพลาด "ไม่พบตัวควบคุมโดเมน" จำนวนมาก (ใครจะเดาได้)
• พวกเขาคิดว่าปัญหาเกิดจากการมี DC ไม่เพียงพอดังนั้นพวกเขาจึงดำเนินการโปรโมตเซิร์ฟเวอร์ทุกตัวให้เข้ากับบทบาทนั้น
• ไม่จำเป็นต้องพูดว่าสิ่งนี้เลวร้ายยิ่งกว่าเนื่องจาก DC ใหม่เหล่านั้นใช้ DNS ที่ไม่ถูกต้องเกินไปดังนั้นพวกเขาจึงไม่สามารถทำซ้ำได้
• สิ่งนี้ยังคงดำเนินต่อไปอีกหลายเดือนพวกเขาแค่ "เคยชิน" กับเครือข่ายที่ไม่น่าเชื่อถือโดยสิ้นเชิง
• นอกจากนี้พวกเขาพยายามเปิดใช้การตั้งค่าการแลกเปลี่ยนซึ่งล้มเหลวอย่างน่าสังเวช เท่านั้นพวกเขาจึงตัดสินใจโทรหาที่ปรึกษาภายนอกและจนกว่าพวกเขาจะไม่ได้รู้ว่ามีอะไรบางอย่างผิดพลาดอย่างแน่นอนในการตั้งค่าเครือข่าย

กาลครั้งหนึ่งฉันมีลูกค้าที่เป็นธุรกิจขนาดเล็ก (10 คน) ที่มีบันทึกสุขภาพอิเล็กทรอนิกส์ (ไม่ใช่แพทย์) ฉันสังเกตเห็นวันหนึ่งว่าการสำรองข้อมูลล้มเหลว จากการทดสอบเทปไดร์ฟไม่ทำงานเลย ฉันพูดถึงเรื่องนี้กับเจ้าของที่บอกว่าเขารู้ดีว่าไดรฟ์นั้นแย่ แต่มันแพงเกินไปที่จะเปลี่ยน

แน่นอน - นั่นไม่มาก WTF

วะคือเขามีพนักงานของเขาหมุนเทปรายวัน, การให้ตู้นิรภัยและทุกคนที่แจ๊สสำหรับ6-9 เดือนนับตั้งแต่มันจะตาย

"อย่าบอกเจ้าหน้าที่มันอาจทำให้พวกเขากังวล"

ฉันทำงานเป็นผู้ดูแลระบบสำหรับ Big Government Agency (หนึ่งในหน่วยงานหลักของรัฐบาลอิตาลี) และได้จัดการศูนย์ข้อมูลของพวกเขามาหลายเดือนแล้ว เย็นวันหนึ่งโทรศัพท์ของฉันแหวนและเจ้านายของฉันบอกฉันบางสิ่งบางอย่างที่เลวร้ายมากที่เกิดขึ้น: ไฟดับทั้งหมด

ตกลงเรามี UPS ใช่ไหม

ใช่ แต่พวกเขาจะไม่นานดังนั้นให้ไปที่นั่นและปิดทุกอย่างจนกว่าพลังงานจะกลับมา

ฉันไปที่นั่นเดินผ่านทางเดินมืดไปถึงห้องเซิร์ฟเวอร์ ... และได้รับการต้อนรับจากสิ่งที่สามารถอธิบายได้ว่าเป็นนรกที่บริสุทธิ์เท่านั้น อย่างแท้จริง ห้องพักร้อนมากคุณสามารถอบเค้กในนั้น พลังงานของ UPS ก็โอเค แต่ครึ่งหนึ่งของเซิร์ฟเวอร์ปิดตัวลงจากความร้อนสูงเกินไปและเซิร์ฟเวอร์ที่เหลือก็ส่งเสียงร้องอย่างเจ็บปวด

เหตุผล?

เซิร์ฟเวอร์อยู่บนไฟ UPS ... เครื่องปรับอากาศไม่ได้

HP ProLiant ML370 G3 การล้มเหลวของพัดลม ... เซ็นเซอร์พัดลมบนมาเธอร์บอร์ดของรุ่นนี้มีแนวโน้มที่จะไม่ดีหลังจาก 5 ปี เซิร์ฟเวอร์ไม่สามารถบู๊ตได้เมื่อตรวจไม่พบการรวมกันของแฟน ๆ ที่ผิด ฉันต้องเดินลูกค้าผ่านการเริ่มต้นอย่างรวดเร็วกับร้านค้า (เพื่อให้แฟน ๆ ปั่นจักรยานตอนบูต) และนี่คือวิธีที่พวกเขาทำให้เซิร์ฟเวอร์ทำงานต่อไปจนกว่าฉันจะมาถึงด้วยระบบใหม่

ฉันเคยเป็นที่ปรึกษาด้านซอฟต์แวร์บัญชีสำหรับการบัญชี Dac-Easy มีอยู่ครั้งหนึ่งที่ฉันถูกเรียกเข้าไปที่สำนักงานใหญ่ของธุรกิจในท้องถิ่นและได้รับการบอกเล่าจากนักบัญชีว่าถ้าฉันไม่สามารถแก้ไขได้ว่าทำไมโปรแกรมถึงเต็มไปด้วยข้อผิดพลาดทางบัญชีในแต่ละสุดสัปดาห์พวกเขาจะต้องหาแอปพลิเคชัน เมื่อดูผ่านไฟล์บันทึกการดูแลระบบฉันค้นพบรายการทั้งหมดมักจะทำในคืนวันศุกร์หรือวันเสาร์ จากนั้นฉันก็พบว่าภรรยาของเจ้าของกำลังลงชื่อเข้าใช้คอมพิวเตอร์ระบบบัญชีจากที่บ้านโดยใช้ PC Anywhere และพยายามที่จะสร้างสมดุลระหว่างบัญชีกับสมุดเช็คของเธอหลังจากไวน์หลายแก้ว เมื่อตัวเลขดูดีเธอจะออกจากระบบ

ฉันยกคอมพิวเตอร์ที่ฉันได้รับจากสำนักงานของ บริษัท แม่ของฉันเมื่อฉันได้ยินบางสิ่งที่สั่นสะเทือนภายใน เมื่อฉันเปิดเคสฉันพบว่ามันเต็ม 1/2 ด้วย Frosted Mini-Wheats ฉันคิดว่าหนูมีชีวิตอยู่ในนั้นหรือใช้แคชอาหาร จุดเริ่มต้นที่น่าจะเป็นช่องว่างระหว่างเคสและแจ็คคีย์บอร์ด DIN

ไม่ใช่สิ่งที่คุณขอ แต่เป็น WTF ที่แน่นอน

ลูกค้ารายอื่นอีกเรื่องสยองขวัญ

ในโพสต์หลักฉันพูดคุยเกี่ยวกับการเขียนทับการสำรองข้อมูลที่ดีอย่างไม่ถูกต้องกับฐานข้อมูลที่เสียหายซึ่งตั้งใจจะแทนที่; มันเกิดขึ้น :-(

ดังนั้นการกู้คืนจากการสำรองข้อมูลจึงจำเป็น โชคดีมีจริงWASการสำรองข้อมูลที่มี: มันก็ทำทุกวันบนเซิร์ฟเวอร์สำรองข้อมูลกลางที่มีห้องสมุดเทปใหญ่จริงๆที่แนบมากับมัน เซิร์ฟเวอร์นี้จัดการการสำรองข้อมูลสำหรับทั้ง บริษัท เป็นค่าใช้จ่ายจริงและติดตั้งซอฟต์แวร์สำรองข้อมูลจริงไว้

จนถึงตอนนี้ดีมาก เราค้นหางานสำรองโหลดเทปที่เหมาะสมเริ่มการดำเนินการกู้คืนโหลดเทปเริ่มคืนค่า ... และไม่มีอะไรเกิดขึ้น

เราลองอีกครั้งบางอย่าง

เรายกเลิกการโหลดโหลดรีบูตลองคืนค่าข้อมูลสำรองก่อนหน้า ... ไม่มีอะไรเปลี่ยนแปลง

เราคาดว่าจะมีการผ่าตัดที่ยาวนานและทิ้งไว้ทั้งคืน ... วันถัดไปก็ไม่มีอะไรเปลี่ยนแปลง

ตกลงเวลาที่จะโทรติดต่อฝ่ายสนับสนุนผู้จำหน่ายซอฟต์แวร์สำรองข้อมูลจริง ... แต่ไม่สามารถทำได้เราอยู่ในวันอาทิตย์ เราลองค้นหาเว็บไซต์สนับสนุนของผู้ขาย แต่จำเป็นต้องมีรหัสการเข้าถึงพิเศษและมีผู้จัดการเพียงคนเดียวเท่านั้น ... ผู้จัดการคนเดียวกันซึ่งจะอารมณ์เสียจริง ๆ เมื่อค้นพบว่าระบบยังไม่ทำงานในวันจันทร์เมื่อเขามาทำงาน

อีกวันหนึ่งของความเจ็บปวดและฉันค้นพบข้อผิดพลาดนั้นเป็นที่รู้จักกันดีและมันได้รับการแก้ไขโดยผู้ขายซึ่งไม่มีใครสนใจ ดังนั้นฉันจึงใช้มัน ... แต่มันทำไม่ได้: การจัดการไม่ต้องการเสี่ยงทำลายอะไรนอกจากผู้ขายยืนยันว่าสามารถนำ patch มาใช้ได้อย่างปลอดภัย ความจริงที่ว่าเซิร์ฟเวอร์สำรองไม่สามารถกู้คืนสิ่งใด ๆ ที่เห็นได้ชัดว่า "แตก" ไม่เพียงพอสำหรับพวกเขา

หลังจากผ่านไปสี่วันการโทรติดต่อฝ่ายสนับสนุนและผู้ขายที่ส่งวิศวกรฝ่ายสนับสนุนไปยังสถานที่ต่าง ๆ ในที่สุดเราก็สามารถใช้โปรแกรมแก้ไขและกู้คืนข้อมูลสำรองได้ เซิร์ฟเวอร์สำรองไม่ได้เคยได้รับสามารถที่จะทำคืน แต่ไม่มีใครเคยทดสอบมันจึงไม่มีใครสังเกตเห็น

Terminal Emulation เพื่อความสนุกสนานและผลกำไร

ฉันทำงานกับระบบเก่า - โดยส่วนใหญ่แล้วเทอร์มินัลข้อความที่เชื่อมต่อกับกล่อง Unix โดยมีคอมพิวเตอร์ Windows บางเครื่องที่ใช้งานได้ซับซ้อน

ข้อเท็จจริงเบื้องหลังที่สำคัญบางประการ

• แอปพลิเคชันซอฟต์แวร์หลักใช้ไฟล์ termcap แบบขยายของตัวเอง termcap ทั่วทั้งระบบและ terminfo จะถูกละเว้น
• แอปพลิเคชั่นซอฟต์แวร์หลักช่วยให้สามารถเลือกการแมปแป้นพิมพ์ได้หลากหลายตามตัวแปรสภาพแวดล้อม
• เทอร์มินัลข้อความทั้งหมดมีคีย์บอร์ดที่ตั้งโปรแกรมได้
• การเชื่อมต่อของ Windows PC โดยใช้ซอฟต์แวร์ไคลเอ็นต์ที่เป็นกรรมสิทธิ์โดยไม่มีการสนับสนุนในตัวโดยแอปพลิเคชันซอฟต์แวร์หลัก
• ซอฟต์แวร์ไคลเอนต์ที่เป็นกรรมสิทธิ์ช่วยให้สามารถเลือกการแมปคีย์บอร์ดที่หลากหลายเมื่อโหลด
• มีพนักงานเพียงครึ่งเดียวเท่านั้นที่ใช้รูปแบบ QWERTY มาตรฐาน
• อย่างน้อยหนึ่งในผู้ดูแลระบบที่ทำงานกับระบบนี้อาจขาดความเข้าใจที่ถูกต้องเกี่ยวกับการจำลองเทอร์มินัล

ฉันคิดว่าคุณสามารถดูว่าฉันจะไปกับสิ่งนี้

มีความพยายามแบบครึ่งใจในการเพิ่มการสนับสนุนเทอร์มินัลที่เหมาะสมในไฟล์ terminfo และ termcap แต่สิ่งเหล่านี้ทำงานได้เพียงบางส่วนเท่านั้น ไฟล์ termcap ที่เป็นกรรมสิทธิ์ซึ่งใช้โดยแอปพลิเคชันระบบหลักใช้งานได้ แต่ส่วนใหญ่ไม่เกี่ยวข้องเนื่องจาก $ TERM ไม่เคยตั้งค่าไว้อย่างถูกต้อง

การเข้าสู่ระบบผู้ใช้แต่ละคนจะต้องเลือกที่พวกเขาลงชื่อเข้าใช้และรูปแบบแป้นพิมพ์ที่พวกเขาต้องการใช้โดยทั่วไป - ไม่มีการตรวจสอบอัตโนมัติที่เกี่ยวข้อง สิ่งนี้จะตั้งค่า $ TERM เป็น ANSI ไม่ว่าจะใช้เทอร์มินัลใดในฝั่งไคลเอ็นต์และชุดตัวแปรสภาพแวดล้อมดังนั้นแอปพลิเคชันซอฟต์แวร์หลักจะทำการแมปบางคีย์อย่างเหมาะสม

ในกรณีของคนที่ใช้เลย์เอาต์คีย์บอร์ดที่ฝังอยู่ในเทอร์มินัลข้อความสคริปต์จะถูกเรียกใช้เพื่อ reprogram บางส่วนของคีย์ไปที่เลย์เอาต์ที่ฝังอยู่ บนพีซี Windows Windows จะมีการโหลดคีย์ลูกค้าเพื่อทำการแมปปุ่มฟังก์ชั่นส่วนใหญ่กับ ANSI ใหม่ ไม่สามารถทำการแมปใหม่ทั้งหมดมิฉะนั้นคีย์อื่น ๆ บางปุ่มจะหยุดทำงาน

การลงชื่อเข้าใช้สิ่งอื่นจากเทอร์มินัลใด ๆ เป็นการออกกำลังกายที่ล้มเหลวและสามารถทำได้อย่างมีเหตุผลบนเซิร์ฟเวอร์โดยตรงเท่านั้น เนื่องจากทุกอย่างใช้งานได้ยากที่จะพิสูจน์ความเหมาะสมของเวลาและความพยายามในการแก้ไข แต่การเพิ่มอะไรที่ใหม่กว่าเทอร์มินัลข้อความอายุ 20 ปีที่เราติดอยู่ในตอนนี้จะต้องมีการเขียนใหม่ของทั้งระบบ

ฉันร้องไห้ข้างในเล็กน้อยทุกครั้งที่เห็น

ฉันรู้จักใครที่ตัดสินใจจัดระเบียบไฟล์ในคอมพิวเตอร์ของพวกเขาใหม่โดยใส่. exe ทั้งหมดไว้ในโฟลเดอร์เดียว

เครือข่ายที่มีพีซี~ 60 ( หก )

หัวหน้าด้านความปลอดภัย

สวิตช์ใหม่บางตัวที่มีความสามารถ VLAN

"แผนการปรับโครงสร้างระบบเครือข่าย" ที่เกี่ยวข้องกับ ~ 20 ( TWENTY ) VLANs

ขอบคุณพลังบางอย่างที่ไม่รู้จักฉันทิ้งไว้ก่อนทั้งหมดนี้จะสามารถเริ่มต้นได้จริง ...

เราให้หนึ่งในผู้ดูแลระบบ Unix ของเราเป็น Windows ไม่นานหลังจากที่เราได้มอบกล่องผู้ดูแลระบบ Windows ให้แก่ผู้ดูแลระบบในความพยายามที่จะเพิ่มความคุ้นเคยกับระบบปฏิบัติการที่แตกต่างกัน ฉันเป็นผู้ดูแลระบบ Windows พยายามที่จะไม่ทำให้เสียลีนุกซ์กล่องฉันถามคำถามมากมายเกี่ยวกับทีม Unix ฉันคาดหวังว่านี่คือวัตถุประสงค์ของการฝึก หลังจากการบรรยายที่เข้มงวดเกี่ยวกับการทำให้แน่ใจว่าฉันปรับขนาดวอลลุ่มของฉันให้ถูกต้องและไม่ใส่ทุกอย่างลงในโวลุ่มเดียวหรือบนพาร์ติชั่นเดียวฉันออกไปและสร้างกล่องที่เพียงพออย่างสมบูรณ์

เมื่อคนที่ใช้ระบบปฏิบัติการยูนิกซ์ที่ให้ฉันบรรยายเกี่ยวกับไดรฟ์ข้อมูลที่แตกต่างกันและไม่สร้างสิ่งต่าง ๆ เพื่อให้ดิสก์เต็มรูปแบบอาจทำให้ระบบปฏิบัติการที่สร้างกล่อง Windows ของเขาพังเขาจึงวางทุกอย่างไว้ใน C: เมื่อฉันพูดว่า "ฉันไม่สามารถสำรองข้อมูลด้วยนโยบายใด ๆ ที่เรามีและเมื่อบันทึกเหล่านั้นกรอกกล่องของคุณจะผิดพลาด" เขากล่าวว่า"ฉันคิดว่า Windows เป็นทุกอย่างใน C: สมเหตุสมผล" เขาไม่ได้สร้างพาร์ติชั่นอีกเลย ฉันเชื่อเรื่องนี้อย่างจริงจัง WTF อย่างแน่นอนที่คุณกำลังคิดอะไรบางอย่าง เห็นได้ชัดว่ามันไม่ได้เกิดขึ้นกับเขาว่าการปฏิบัติที่ดีที่สุดบางอย่างเหมือนกันโดยไม่คำนึงถึงระบบปฏิบัติการ

คำตอบของMassimoทำให้ฉันนึกถึง WTF อื่น ...

สำนักงานขนาดเล็กมีเซิร์ฟเวอร์ Windows 2003 ที่มี Exchange, Symantec AV และอื่น ๆ บริษัท มักจะใช้เราในการทำงานด้านไอทีทั้งหมด แต่ฮอตสปอตใหม่นี้อยู่ในสำนักงานและซื้อพีซีเครื่องใหม่ เรามีพวกเขาบนแพลตฟอร์ม Dell Optiplex ที่เป็นเอกภาพคนนี้จึงตัดสินใจแทนที่พวกเขา 3 คนด้วย "เครื่องที่ยอดเยี่ยม" ซึ่งวางขายที่ Best Buy

ไม่ว่าพวกเขาจะเข้าร่วมกับโดเมนได้อย่างไร

สายแรก:

เราไม่สามารถหามุมมอง เครื่องมาพร้อมกับ Word (Microsoft Works) ดังนั้นทุกอย่างจะอยู่ที่ไหน

สายที่สอง:

เราจะใช้โปรแกรมป้องกันไวรัสเครือข่ายได้อย่างไร

นี่คือ wtf ฉันไปที่สถานที่และ 7 เครื่องของพวกเขาได้รับการกำหนดค่าเป็น Symantec Antivirus SERVERSแทนที่จะติดตั้งไคลเอนต์ เห็นได้ชัดว่าสุภาพบุรุษไม่ชอบที่เราได้ล็อคการตั้งค่าของลูกค้าและตัดสินใจที่จะ "ติดตั้ง" ลูกค้าเพื่อให้เขาสามารถเปลี่ยนแปลงได้เมื่อสแกน เห็นได้ชัดว่าซีดีแผ่นแรกสำหรับ Symantec AV ที่เราได้ออกไปชักชวนให้เขาติดตั้ง "เซิร์ฟเวอร์" มากกว่าลูกค้า

ลูกค้าโทรหาฉันเพื่อช่วยงานสร้างเซิร์ฟเวอร์ ในระหว่างการสร้างฉันได้รับแจ้งว่านี่เป็นเซิร์ฟเวอร์ทดแทนสำหรับสองตัวล่างจากชั้นวาง ฉันคิดว่ามันแปลกที่ตำแหน่งแร็คเกี่ยวข้องและถามว่าทำไม เปิดห้องเซิร์ฟเวอร์ออกหลังท่อน้ำที่ไหลผ่านกลางห้อง

ดังนั้นท่อน้ำกำลังทำอะไรอยู่กลางห้องเซิร์ฟเวอร์ที่คุณถาม ห้องน้ำสำหรับผู้หญิงอยู่ติดกันและห้องเซิร์ฟเวอร์มองไม่เห็น จะมีอะไรดีไปกว่าที่จะนำฟีดหลักเข้าห้องน้ำ?

โอ้นี่เป็นสิ่งที่ง่าย ...

ฉันมีการติดตั้งระบบ Linux สำหรับ บริษัท ที่ตั้งอยู่ในคลังสินค้าในเขตชนบทของรัฐเคนตักกี้ ระบบนี้เป็นแอปพลิเคชั่นการบัญชี / สินค้าคงคลังสำหรับองค์กร ฉันกำลังแทนที่เซิร์ฟเวอร์ SCO ในปี 1998 ด้วยเซิร์ฟเวอร์ CentOS 4 ใหม่ เป็นผลให้ฉันคาดว่าจะเลวร้ายที่สุดเมื่อมันมาถึงการเชื่อมต่อและลูกค้า คุณรู้ไหมว่าพีซีเก่าสายเคเบิลไม่ดี ฯลฯ ฉันส่งสวิทช์ใหม่สายเคเบิลไคลเอนต์ขนาดเล็ก ฯลฯ ไปยังเว็บไซต์ ...

อย่างไรก็ตามฉันไม่คิดว่าการเดินสาย "ตู้เสื้อผ้า" จะอยู่ในห้องน้ำ ! ที่จริงแล้วการเดินสายตั้งอยู่ในพื้นที่เหนือเพดานที่ตกลงมาเหนือห้องน้ำห้องส้วมคลังสินค้า ซึ่งรวมถึงโมเด็ม DSL, HUB 10 เมกะบิตและ 66 บล็อกสำหรับโทรศัพท์ ...

ลูกค้ารายเดียวกันมีส่วนร่วมในสิ่ง DNS From Hell

เซิร์ฟเวอร์ Exchange ของพวกเขายังคงทำงานเป็นเวลาหลายปีอย่างสง่างามและแม้จะรอดชีวิตจากความล้มเหลวของดิสก์บางส่วน (ขอบคุณ RAID และขอบคุณมากขึ้นการสำรองข้อมูล) วันหนึ่งผมถูกเรียกอีกครั้งสำหรับปัญหาที่ไม่เกี่ยวข้องกันและพวกเขาบอกผมว่าการกินบางสิ่งบางอย่างหนักใจพวกเขาบางครั้งก่อนที่พวกเขาค้นพบทุกคนก็สามารถที่จะเปิดกล่องจดหมายของทุกคนอื่น; พวกเขาคิดว่ามันแปลก แต่ก็ไม่ได้ทำอะไรเพราะไม่รู้ว่าจะแก้ไขได้อย่างไรและอีเมลก็ใช้งานได้และ (เกือบ) ไม่มีใครปฏิเสธเรื่องนี้

ผมก็ค่อนข้างตกใจที่นี่: ทุกคนก็สามารถที่จะเปิดกล่องจดหมายใด ๆ อื่นอย่างใดอย่างหนึ่งและพวกเขาคิดว่านี่คือเฉพาะผู้เยาว์รำคาญและไม่รบกวนการทำอะไรสำหรับสามเดือน บุคคลทั่วไปใด ๆ จะดึงสายเครือข่ายจากเซิร์ฟเวอร์ทันที แต่ไม่ใช่พวกเขา

แหล่งที่มาของปัญหาคือ ... แปลก: มีคนตั้งค่า "ทุกคน / การควบคุมเต็มรูปแบบ" ที่ระดับการแลกเปลี่ยนองค์กรใน Active Directory ดังนั้นทุกคนจึงกลายเป็นผู้ดูแลระบบ Exchange แบบเต็มทันที โชคเดียวของพวกเขาคือมีเพียงไม่กี่คนที่สังเกตได้

ณ วันนี้ไม่มีใครรู้เลยว่าใครทำอย่างนั้นจริง

ทำงานเป็นโปรแกรมเมอร์เต็มเวลาและผู้ดูแลระบบนอกเวลาสำหรับ บริษัท ขนาดเล็กที่ทำบัญชีสำนักงานแพทย์ (อ่าน: การเรียกเก็บเงินของลูกค้าและการเรียกร้องค่าสินไหมทดแทน) รับสายจากลูกค้ารายใหญ่ว่าเซิร์ฟเวอร์ของพวกเขาหยุดทำงาน มันเป็นผลิตภัณฑ์ใหม่ที่ใช้ Altos Unix SysV / 386 ตั้งแต่ฉันเป็นทุกอย่างที่พวกเขามีพวกเขาส่งฉันและสาวใหม่

ไปถึงที่นั่นและมีห้องที่เต็มไปด้วยผู้ให้บริการป้อนข้อมูลที่พิมพ์ในเอกสาร WordPerfect ให้เร็วที่สุดเท่าที่จะทำได้ มีเส้นลากยาวออกไปจากรัฐซึ่งผู้ประกอบการรายอื่นทำแบบเดียวกัน

ไดเรกทอรีเอกสารนั้นมีเอกสารที่สมบูรณ์แบบประมาณ 10,000 คำซึ่งทั้งหมดอยู่ในรูปแบบเดียวกัน ทั้งหมดในหนึ่งไดเรกทอรี ผู้คนมากมายได้รับบาดเจ็บและทนทุกข์ทรมานจากสิ่งนั้น ดูเหมือนว่าหมอคนนี้เป็นคนที่ชอบไปทนายเพื่อยื่นฟ้องคดีการบาดเจ็บ

ฉันพยายามที่จะบูทออกจากฟลอปปี้และหาเสียงมากมาย ฉันดึงฟลอปปี้ออกมาและมันถูกปกคลุมด้วยใยแมงมุมอย่างสมบูรณ์ฉันกำลังพูดถึงกำมือหนึ่งที่นี่ มันเป็นสำนักงานของแพทย์ดังนั้นฉันจึงเรียกร้อง swabs และแอลกอฮอล์ (มันเป็นดิสก์สำหรับบูต Unix เดียวที่เรามีและโอกาสเดียวที่จะแก้ไขสิ่งต่าง ๆ ในสายบริการนั้น) และเริ่มทำความสะอาดฟลอปปี้ไดรฟ์และเซิร์ฟเวอร์

มีปัญหาอยู่สองข้อปัญหาหนึ่งคือเซิร์ฟเวอร์เต็มไปด้วยสิ่งสกปรกจากสำนักงานปูพรมและที่ตั้งของมุมห้อง (บนพรมหนา ๆ ) และร้อนเกินไปในสำนักงาน 80 องศา ระบบไฟล์ต้องการ FSCK'ing อย่างจริงจังและฉันก็แบ่งไฟล์ 10K ออกเป็นชุดย่อยของตัวอักษรใหม่และแนะนำให้พวกมันย่อยสลายต่อไป

หมอเป็นหลุม *** ที่สมบูรณ์แบบที่ฉีกเราใหม่เมื่อเราเข้าประตู เมื่อเราจากไปเราอธิบายว่าการซื้อ WordPerfect สำหรับตัวเลือก UNIX จากเราไม่ได้หมายความว่าเรามีขนาดเซิร์ฟเวอร์สำหรับการสร้างเอกสารภายใน นอกจากนี้เขาต้องการเครื่องปรับอากาศ, ที่ตั้งเซิร์ฟเวอร์ที่ปราศจากพรม, UPS, RAID ภายนอกและโปรโตคอลการจัดเก็บไดเรกทอรีที่ดีกว่า ทันใดนั้นเขาก็เป็นหูทั้งหมดเช่นนี้เป็นวิธีที่เขาทำเงินทั้งหมดของเขา ฉันให้ข้อมูลทั้งหมดแก่ฝ่ายขาย แต่ออกจากงานนั้นหลังจากนั้นไม่นานด้วยเหตุผลอื่น

WTF ที่ดีที่สุดของฉันมาจากนายจ้างปัจจุบันของฉันเมื่อฉันเริ่มที่นี่เป็นครั้งแรก

ในช่วงสองสามเดือนแรกของการทำงานเกี่ยวข้องกับความตื่นตระหนกและสยองขวัญอย่างต่อเนื่องในขณะที่ฉันค้นพบสถานะของเซิร์ฟเวอร์ ที่ระดับประสบการณ์ปัจจุบันของฉันฉันอาจเพิ่งแนะนำให้จุดไฟไปยังสถานที่และรวบรวมประกันภัย แต่ส่วนที่ดีที่สุดคือนโยบายของ บริษัท หนึ่ง:

ไม่มีการบัญชีสำหรับลูกค้า dialup ที่ ISP ที่ได้รับครึ่งหนึ่งของรายได้จากลูกค้า dialup นี่เป็นนโยบายที่เกิดขึ้นเป็นเวลา 6 ปีตามเวลาที่ฉันเริ่มและมันทำให้ฉันนึกไม่ออกว่าจะทำอะไรกับมัน บรรทัดมาตรฐานคือ "เราเชื่อมั่นลูกค้าของเราว่าจะไม่ใช้งานมากเกินไป" ความจริงที่ว่าสถานที่นั้นทำงานในงบประมาณเชือกผูกรองเท้าและไม่มีผู้ดูแลระบบตัวจริงที่สวิตช์ตลอดเวลานั้นไม่ได้ช่วยเรื่องที่ฉันไม่คิด

ผลลัพธ์สุดท้ายของนโยบายนี้คือผู้ส่งอีเมลขยะได้สั่งการเรียกเลขหมาย เกือบทุกคืนพวกเขาจะใช้บัญชีเดียวในการโทรเข้าโมเด็มหลาย ๆ ตัวจนกว่าสระทั้งหมดจะเต็มจากนั้นสแปมก็จะระเบิดให้เร็วที่สุดเท่าที่จะทำได้ AAA RADIUS รุ่นไม่ได้ช่วยแก้ปัญหาในเรื่องที่ว่าไม่มี "การอนุญาตให้ผู้ใช้หนึ่งคนพร้อมกัน" ในเวลาเดียวอย่างรวดเร็วในเวลานั้น ฉันแฮ็กข้อมูลบางอย่างร่วมกันใน Perl เพื่อตัดการเชื่อมต่อทุกคนที่มีการเข้าสู่ระบบสองครั้งจนกว่าจะถึงเวลาที่เซิร์ฟเวอร์ RADIUS จะถูกแทนที่และนั่นก็ช่วยแก้ไขปัญหานั้นในช่วงสัปดาห์แรกหรือสองสัปดาห์ ส่วนหนึ่งของปัญหาอื่น ๆ คือฉันไม่ได้รับอนุญาตให้มีเวลาเพียงพอในการแก้ไขสิ่งต่าง ๆ (ดู: งบประมาณเชือกผูกรองเท้า) เนื่องจากฉันยังให้การสนับสนุนทางเทคนิคในเวลาเดียวกัน แต่ส่วนหนึ่งของเหตุผลที่ฉันยังอยู่ที่นี่ก็คือฉันมีอิสระเหนือทุกสิ่ง ฉันไม่คิดว่าฉันจะ เคยมีคนบอกว่าไม่ให้ทำอะไรต่อ ข้อ จำกัด เดียวที่ฉันเคยมีคือเงิน

สิบปีที่แล้วฉันสัมภาษณ์ บริษัท ที่มีสายเคเบิลของห้องเซิร์ฟเวอร์หลักดูเหมือนซุปปาเก็ตตี้ อุปกรณ์เครือข่ายอยู่ใน 3 ชั้นวางใกล้กับมุมหนึ่งของห้อง 20 ฟุต x 60 ฟุต มีน้ำตกสายเคเบิลเครือข่ายทุกสีกลิ้งลงชั้นวางและสิ้นสุดในแอ่งของสายพันกันยาวประมาณ 7 ฟุตกว้างและกระเด็นออกมาประมาณ 5 ฟุตจากชั้นวาง ไม่มีเอกสารใด ๆ และไม่มีใครรู้ว่าเกิดอะไรขึ้น

บริษัท มีส่วนแบ่งการตลาด 95% ในสาขาที่จัดการกับความปลอดภัยของชีวิตและทรัพย์สิน ทั้งหมดที่ฉันสามารถพูดได้คือสิ่งนั้นสามารถหยุดชั่วคราวได้จริง

BTW บริษัท ยังอยู่ในธุรกิจและเห็นได้ชัดว่าได้ทำความสะอาดสิ่งต่าง ๆ มากมายตั้งแต่นั้นมา

อยู่ในตู้เสื้อผ้า Demarc เมื่อไม่นานมานี้และพบว่าการตั้งค่าที่น่ารักนี้บนไซต์:

การติดตั้งสายเคเบิลใย Elite = TWIST TIE

alt text http://locobox.googlepages.com/Fiber.jpg alt text http://locobox.googlepages.com/Fiber2.jpg

ไม่กี่ปีที่ผ่านมา บริษัท ที่ฉันทำงานเพื่อรับหนึ่งในคู่แข่งของเราและฉันต้องตรวจสอบเครื่องจักรของพวกเขา (Centos) เพื่อให้แน่ใจว่าพวกเขาจะตรงตามมาตรฐานของเราในแง่ของการกำหนดค่า (ระบบดูแลระบบของพวกเขาปฏิเสธโอกาส สนับสนุนการเริ่มต้น บริษัท ของเขาเองซึ่งพัฒนาโซลูชันแบบเทิร์นคีย์

ใน /etc/rc.local (บ้านของ WTF ที่ยอดเยี่ยมทั้งหมด) ฉันพบ:

swapon /dev/sda3

และ

route add -net 10.0.0.0 netmask 255.255.0.0 eth1

หมายเหตุ: eth1 ถูกกำหนดค่าใน ifcfg-eth1 ด้วย netmask เป็น 255.255.255.0

เห็นได้ชัดว่า sysadmins ที่แท้จริงไม่ใช้ไฟล์ config ที่ cliched เช่น / etc / fstab และ / etc / sysconfig / network-สคริปต์ / *

ต้นปีนี้เราจ้างผู้หญิงคนใหม่ ฉันถูกขอให้ตรวจสอบให้แน่ใจว่าแบบอักษรของ บริษัท ทั้งหมดได้รับการติดตั้งบนคอมพิวเตอร์ของเธอ ฉันรู้ว่าพวกเขาเป็น แต่ตัดสินใจเลือกการต่อสู้ของฉันและเพิ่งติดตั้งอีกครั้ง ฉันได้รับโทรศัพท์จากหญิงสาวประมาณ 5 นาทีหลังจากนั้นและเธอต้องการให้ฉันเข้ามาและแสดงวิธีใช้ "ซอฟต์แวร์" ใหม่ที่ฉันติดตั้ง ฉันเดินไปเปิด Word แล้วเดินผ่านวิธีการเปลี่ยนแบบอักษร .... ซึ่งเป็นสิ่งที่ฉันติดตั้ง

เธอคนนี้มีปริญญาเอก !! เธอไม่ทำงานที่นี่อีกต่อไป แต่ไม่ใช่เพราะเธอไม่รู้วิธีใช้แบบอักษร