לא מעט מנהלי מחלקות IT ומרכזי מידע מצאו את עצמם נאבקים לחלץ ביצועים טובים מתשתיות לקויות באופן חמור. להלן סיפורם של שלושה מנהלים שמצאו עצמם מתמודדים עם בעיות תשתית קיצוניות, ביצעו שינויים משמעותיים, ויצאו עם ידם על העליונה.

קנט הויוס, סמנכ"ל טכנולוגיות המידע של המרכז הרפואי פומונה וואלי בקליפורניה, מספר כי מצא את עצמו יום אחד בגרסת IT של "התופת של דאנטה". בעיות הולכות ומחמירות של חום איימו על הפעילויות היומיומיות של המרכז ומנעו את הכנסתן של טכנולוגיות חדשות. הטמפרטורות בחדרי השרתים זינקו עד ל-39 מעלות צלזיוס. "זה היה זוועתי", מספר הויוס. "ניסינו להוציא ממרכז הנתונים את המירב, אבל בסופו של דבר מצאנו את עצמנו עם סביבה פשוט נוראית".

החברה שנשכרה מלכתחילה לתכנן את מרכז הנתונים הבטיחה קירור מספק, אולם בשלב בו הטמפרטורות החלו לטפס היא פשטה את הרגל והותירה את פומונה להתמודד לבד עם המצב.

בית החולים עשה בשעתו שימוש בשני מזגנים, במשקל 5 טון האחד, על מנת לקרר את מרכז הנתונים, אך החום שנפלט מהשרתים העלה את הטמפרטורות אל מעל ל-30 מעלות. שני מזגנים ניידים הונחו על הרצפה, ופתח למזגן נוסף הוכן בחלון. גם פעולות אלו לא הפסיקו את העלייה בטמפרטורות ושורה של מאווררים נתלתה במקומות שונים לאורך התקרה על מנת להקל על נקודות ספציפיות של חום גבוה. "זה היה אחד הדברים המגוחכים ביותר שראיתי בחיי", אומר הויוס. "פשוט לא הייתה ברשותנו התשתית המתאימה על מנת לנוע קדימה".

בזאת לא נסתיימו הצרות. בית החולים ניסה להוסיף מערכת PAC דיגיטלית (Picture Archiving and Communications) שהצריכה פלטפורמת SAN גדולה. "זה היה כמו להכניס כבשן לתוך החדר", נזכר הויוס. כאשר אחד מהמזגנים התקלקל, הטמפרטורות עלו אל מעל ל-40 מעלות, ומספר דיסקים קשיחים, כמו גם רכיבים נוספים, החלו לקרוס. בסך הכול, ניזוק ציוד בשווי 40 אלף דולר ומחלקת ה-IT הוצפה בזרם בלתי פוסק של תלונות.

מגבלות מקום מנעו את הוספתן של מערכות מיזוג אוויר גדולות נוספות, ורצפה צפה בגובה של 15 סנטימטרים הגבילה אף היא את האפשרויות. הויוס בחן את אפשרות השימוש במים מצוננים, אך החליט לבסוף שלא להכניס מים למרכז הנתונים, במיוחד לאור העובדה ששטח הרצפה המצומצם חייב כי יחידות הקירור תמוקמנה מעל השרתים. לחילופין, הוא החל לעבוד עם בשיתוף פעולה עם Liebert והתקין את מערכות הקירור XD של החברה.

עשרים יחידות קירור Liebert XDV ושתי יחידות שאיבה XDP הותקנו במרכז הנתונים כתוספת לשני המזגנים הקיימים. המערכות הוצבו ישירות על ארונות השרתים וסיפקו קירור של עד 5000 וואט לכל מטר מרובע. בסך הכללי, המערכות החדשות סיפקו למרכז הנתונים קירור שווה ערך ל-44 טונות של מיזוג אוויר, מה שאפשר להויוס להפוך את הסביבה הלוהטת לסביבה נוחה של 20 מעלות. "פתאום הטלפונים במרכז התמיכה הפסיקו לצלצל", הוא אומר. "כל אותן בעיות בהן נתקלנו בגלל תנאי עבודה לא אופטימאליים פשוט נעלמו".

הפסקות חשמל ושרתים גוססים בקולג'

בשנים בהן הקולג' של דרום נבאדה גדל לממדיו הנוכחיים - כ-40 אלף סטודנטים ו-500 אנשי סגל - תשתיות ה-IT שלו התרחבו באופן אקראי, כתגובה לדרישות ספציפיות ממחלקה כזו או אחרת. הדבר הוביל לכך שהתשתית חולקה בין חמישה מרכזים שונים, מרכזים הממוקמים בשלושה קמפוסים נפרדים המרוחקים 45 קילומטרים זה מזה.

"הם לא היו הרבה יותר מחדרונים קטנים עם ציוד רשתות, מערכת UPS וכמה שרתים", אומר ג'וש פאודי, סמנכ"ל טכנולוגיות המידע. "ניסינו להוסיף עוד שירותים עבור הסטודנטים ואנשי הסגל, אך התחלנו להיתקל במספר הולך ועולה של בעיות - בעיות קירור, בעיות של לחות, ואפילו הפסקות חשמל מקומיות. חלק מהרכיבים, כולל שרתים, פשוט החלו לגסוס".

עם עליית הטמפרטורה בקיץ, מחלקת ה-IT של הקולג' הייתה חייבת לכבות שירותים באופן יזום כיוון שהקירור התבסס על מערכת מיזוג האוויר הכללית של הבניינים השונים. "הטמפרטורות החלו לעלות אל מעל ל-40 מעלות", אומר פאודי. "ידענו שחדרי השרתים כבר אינם יכולים להועיל, והחלטנו שריכוז התשתית כולה במקום יחיד יהיה הפתרון הנכון מבחינה כלכלית וטכנית".

תוך עבודה משותפת עם HP וחברת פתרונות המיזוג American Power Conversion, הקולג' בנה חדר שרתים יחיד שעושה שימוש בשרתי להב, תוכנות וירטואליזציה, ומערכות מיוחדות לבקרת חום וקירור.

לקולג' היו יותר מ-250 שרתים פיזיים בחמשת החדרים הנפרדים. 150 מהם הועברו למרכז הנתונים החדש. שאר המערכות שוחזרו באמצעות תוכנת וירטואליזציה של VMware ושלושה שרתי להב של HP. פאודי מתכנן והרחיב את השימוש בווירטואליזציה ושרתי להב בכל פעם ששרת ישן יגיע לסוף תקופת חייו.

על מנת להתמודד עם בעיות קירור, הקולג' החל לעשות שימוש בפלטפורמת ה-InfraStruXure של APC. הפלטפורמה ממקמת שתי שורות של שרתים גב אל גב, מה שמכריח את האוויר החם להתרכז באזור מרכזי התחום משני צדדיו, שם הוא מטופל על ידי מערכת קירור מיוחדת.

לדברי פאודי, הפרויקט הוצא אל הפועל ללא צורך באנשי IT נוספים, הוריד באופן משמעותי את זמן הנסיעות של אנשי הצוות, והעלה את דרגת הזמינות של המערכת מ-79% בנקודת השפל ל-99.99% כיום. מרכז הנתונים החדש אף מאפשר לקולג' להרחיב את השירותים אותם הוא מספק לסטודנטים ואנשי הסגל.

מרכז נתונים עתיק ומבולגן

המרכז הרפואי נורטון בלואיסוויל כולל ארבעה בתי חולים, 10 מרכזי טיפול נמרץ ויותר מ-50 מרפאות. כל אלו מקבלים שירות ממרכז נתונים יחיד הממוקם בבניין בן מאה שנה. מרכז הנתונים עצמו הוא בן 35, והורחב במהלך השנים ללא תכנון מסודר, כך לדברי מייק מור, מנהל התכנון הטכני.

המרכז, שגודלו כ-360 מטרים רבועים הכיל במקור מחשבים מרכזיים (mainframes), אולם עבר לארכיטקטורת שרת-לקוח לפני כ-15 שנה. לאורך השנים נוסף למרכז ציוד והתוצאה היתה יותר מ-600 שרתים שהיו מפוזרים באופן אקראי על הרצפה. "היו שם שורות מאונכות, מאוזנות, מקביליות, ולא היה שום ניסיון לייצר מבנה מסודר", מספר מור.

לבית החולים היו כמה יחידות CRAC (קיצור של Computer Room Air Conditioner), והגידול במספר השרתים בתוך המרכז הביא למקסימום את צריכת החשמל, מה שלא אפשר הוספה של ציוד נוסף או הרחבה של שירותים ויישומים קיימים.

את אחת מן המגבלות המרכזיות של המרכז היוותה הרצפה הצפה, שנבנתה בעזרת ריבועי פרקט של 60 סנטימטרים שבשלב כלשהו בעבר כוסו על ידי ריבועים של שטיח מקיר לקיר בגודל 45 סנטימטרים כל אחד. כאשר בית החולים ניסה לשפר את זרימת האוויר, נעשה שימוש במסורים על מנת ליצור חורים ברצפה, ופתחי אוורור מאלומיניום מוקמו עליה במטרה לאפשר לאוויר החם לעלות למעלה.

"היה פשוט מסוכן להסתובב במרכז הנתונים", מספר מור. "ניתן היה למעוד על פיסות של שטיחים, פתחי אלומיניום, והתנועה בחדר הייתה מוגבלת באופן קיצוני. כאשר לבסוף הרמנו כליל את הרצפה, מצאנו שם חצי מטר עומק של כבלים שרבים מהם היו כבלי mainframe ישנים שמעולם לא סולקו".

בית החולים החליט שדרוש שיפוץ כללי של המרכז, כולל הנחה מחדש של כלל הכבלים והחלפת הרצפה הישנה ברצפה חדשה מתוצרת Tate Access Floors שתאפשר זרימת אוויר טובה גם מתחתיה.

השיפוצים הושלמו בשני שלבים, כאשר בכל שלב משודרגת מחצית מהמרכז. כאשר הרצפה החדשה הייתה מוכנה, שורות השרתים סודרו בתצורה של מעבר חם/מעבר קר (hot-aisle/cold-aisle), ומערכות קירור חדשות של חברת Liebert הותקנו על מנת להבטיח זרימת אוויר וטמפרטורות מספקות.

מור מסתמך באופן משמעותי על פתרונות וירטואליזציה על מנת להפחית את מספר השרתים הפיזיים במרכז הנתונים החדש. כיום המרכז מאכלס כ-475 שרתים פיזיים ו-175 שרתים וירטואליים. "שיפרנו את האבטחה, הכפלנו את החשמל העומד לרשותנו, העלנו ב-100% את עומס העבודה המקסימלי, ואף הורדנו את מספר הפניות לשירות התמיכה ב-20%, כל זאת ללא הוספה של אף איש צוות", אומר מור. כעת, כאשר מרכז הנתונים החדש מתפקד באופן מלא, מור מאמין שלבית החולים יש מענה לכל צרכי ההתרחבות לעשור הקרוב, והוא יכול סוף סוף להתפנות לתכנון מרכז נפרד להתאוששות ממקרי אסון.