Posts filed under ‘Best Practices’
RFID in the Datacenter
ככל שחדרי המחשב נהיים גדולים ומורכבים יותר, וככל שהמערכות והתוכן שבהם יקר יותר, מתעורר צורך לבקרה ואבטחה של נכסי ה IT ולאיתור מהיר של מיקומם.
מי לא חווה מקרים בהם הספק טוען שהשרת סופק, המחסנאי טוען שהשרת מעולם לא הגיע למחסניו ובסוף השרת נמצא מותקן בחדר המחשב?
או מקרים בהם לקח חצי יום לאתר את השרת הספציפי ? או מקרים בהם שרתים של לקוחות שונים אוחסנו באותו ארון, למרות נוהלי אבטחה האוסרים זאת?
ASSET TRACKING & ASSET SECURITY
טכנולוגית RFID מאפשרת לנהל מערכת מלאי ולדעת בזמן אמיתי את מיקומו של כל שרת וכל מתקן IT. ניתן לדעת את מיקומו של כל שרת ברמת הארון או ברמת האזור בחדר. כך ניתן, בלחיצת כפתור להוציא דוח המראה את מיקומו המדויק של כל שרת, בכל אחד מחדרי המחשב או אזורי ה STAGING
המדבקות הן RFID אקטיביות הפועלות על סוללות בעלות אורך חיים של 7-10 שנים.
Environmental Monitoring
ניתן גם לשלב מדבקות RFID המכילות חיישני טמפרטורה, לחות, מגע דלת או מים.
RFID POWER MONITORING
המערכת גם מספקת מדידה של צריכת החשמל מכל פס שקעים באמצעות מדבקת RFID המתחברת למבואה הטורית של פסי שקעים של server technology.
דטה סנטר במכולה – אתר חוות השרתים של THOR באיסלנד
אחת החברות הבולטות בתחום ה datacenter container היא חברת AST MODULAR שאחד ממוצריה הוא ה PMDC המצליח של יבמ.
בסרטו זה, שאורכו 7 דקות מציג הנרי דוארנט, מנכל AST את הקונטיינרים שהתקין באתר THOR שבאיסלנד. אתר זה הוא אחד היעילים בעולם מבחינה אנרגטית, במידה רבה בזכות יכולתו להשתמש ב FREE COOLING כמעט כל השנה. ה PUE באתר זה הוא בסביבות 1.1
גם כאשר FREE COOLING אינו בר ביצוע, זהו פרויקט מעניין לכל מקצוען דטה סנטר. ברור שניתן להתקין גם מערכות מיזוג אוויר המתאימות לאקלים מדברי או ים תיכוני.
כמה דגשים:
17 ארונות שרתים U 42 בקונטיינר, KW 14 כל אחד.
קונטיינר עליון המכיל מערכות מיזוג אוויר וכיבוי אש.
יתירות ברמה TIER3
מערכות PDU מבוקרות,
פסי צבירה (של starline )
מערכות שו"ב כולל אבטחת כניסה ביומטרית
להנאתכם
ממשלת ארה"ב עורכת מדריך רכש לחדרי מחשב במכולות
עוד סימן למומנטום של מרכזי מחשוב במכולה ( containerized data centers ) בעולם. הממשלה הפדראלית של ארה"ב כותבת מדריך אשר יסייע לסוכנויות הממשל לבחור בין ההיצע הגובר של מכולות דאטה סנטר.
היועץ מארק בראמפיט נשכר על ידי ה GSA של הממשל ועל ידי מעבדות ליברמור המשויכות למשרד האנרגיה של ארה"ב לכתוב את המדריך שיסייע לסוכנויות הממשל להעריך את הפתרונות הקיימים ואת הדור החדש.
מספר גדל והולך של ספקים מציע פתרונות של חדרי מחשב במכולה, כולל AST, IBM, HP, Dell. Data pod ואחרים. העניין הגובר בפתרון זה נובע מהצורך בפתרונות מודולאריים המאפשרים יישום מהיר וחיסכון תפעולי, בייחוד בתחום האנרגיה.
בייחוד מעורר עניין אתר ה HOSTING החדש באיסלנד THOR שהגיע ל PUE מדהים של 1.07 באמצעות שימוש בקונטיינרים של AST-GLOBAL
ההמשלה הפדראלית של ארה"ב החלה במה שנראה כפרויקט הקונסולידציה הגדול בהיסטוריה בתקווה לצמצם עלויות הקשורות בלמעלה מ 1,100 אולמות מחשב. ממשל אובמה הורה לאחרונה לראשי הסוכנויות הפדראליות להאיץ את מאמציהם בתחום הקונסולידיציה של המשאבים והנדל"ן עם דגש מיוחד על מרכזי מחשוב.
שינויים ב Tier system של מכון ה Uptime
בשנה שעברה הודיע ה Uptime Institute שהוא עובד על שינויים בהגדרת רמות השרידות בעזרת ועדה המורכבת ממנהלי DATA CENTER. לאחרונה פורסם השינוי הראשון.
הסבר קצר על רמות השרידות: Tier System
הגדרת רמות השרידות מ רמה 1 ( Tier 1 ) הבסיסית עד רמה 4 (Tier 4 הגבוהה ביותר) של מכון ה Uptime הפכה כבר לפני שנים להיות הסטנדרט בפועל של התעשייה להגדרת רמות השרידות.
השינוי הוא הגדרה לאחסנה מינימאלית של 12 שעות סולר לגנראטורים לגיבוי. השינוי חוצה את כל הרמות, מ 1 עד 4.
השינוי התקבל בעזרת הועדה המייעצת הכוללת 29 חברות שלהן חדרי מחשב בגדלים וברמות שונות. מס' הצעות עלו לוועדה ולא התקבלו, ביניהן החלטה על זמן גיבוי מינימאלי של מערכות UPS.
המתבונן מן הצד יכול לתמוה מדוע גם Tier 1 – שהוא חדר מחשב בסיסי , הוא חלק מן ההחלטה. ובכן אחד היעדים של המכון הוא לבדל גם את חדרי Tier 1 מחדרים מאולתרים בסגנון שאנו רואים לא מעט בישראל ( לדוגמא מזגני קיר משרדיים שמזעזעים אותי כל פעם מחדש) או מסתם ארון שרתים המוצב באיזו פינה.
לקחים מתקלות בחדרי מחשב 2 #
מוקד השרות שלנו קיבל את הקריאה. התראה על נזילת מים התקבלה מחדר המחשב של אחד מלקוחותינו. חוות השרתים הושבתה. צוות השירות שלנו הוזנק למקום.
מדובר בחדר מחשב מתקדם שבו מיזוג האווויר מבוסס ברובו על יחידות קירור שורה ( ROW COOLING ) מסוג cooloop של קנור אמרסון. זהו חדר בינוני בגודלו (עומס IT של מאות קילוואט) אך מתקדם ומקצועי מאוד. האם הנזילה מקורה בתשתית מיזוג האוויר שאנו התקנו?
בעוד הצוות בדרכו לאתר, הגיעה צפירת ההרגעה. מסתבר שהמנקה החרוצה של אותו אתר, החליטה לשטוף את רצפת חדר המחשב. מי השטיפה הגיעו לאחד מחיישני המים מתחת לרצפה הצפה והפעילו את מערכת ההתראה וזו השביתה את יחידות מיזוג האוויר.
מסקנות ולקחים:
1. כניסת המנקה לחדר הייתה צריכה להיות מפוקחת. אין להכניס דלי מים לדטה סנטר. הדלי צריך להישאר מחוץ לאולם המחשב או בפנים בסמוך לדלת הכניסה. את הרצפה הצפה יש לנקות עם סמרטוט לח בלבד. על עובדי הניקיון לעבור הדרכה מתאימה ולעבוד תחת פיקוח.
2. המערכת עבדה כפי שתוכננה. אך האם הנוהל היה נכון? על מנהל חדר המחשב להחליט האם באמת יש צורך בהשבתת מערכות המיזוג כתוצאה מהתראה של חיישן אחד. לדעתנו, לא.
יש לכם סיפור טוב על לקוחים מתקלות בחדרי מחשב ? שתפו את הקהילה כתבו לי
יגאל שניידר
לקחים מתקלות בחדרי מחשב – 1 #
האם במקרה של אזעקת אש/עשן בבנין, יש להשבית מייד את מערכות המיזוג של חדר המחשב?
מנהל חדר המחשב, אחד מהיותר מקצועיים בארץ, שיתף אותי במקרה הבא: מאזור המשרדים המצוי באותה קומה בה נמצא חדר המחשב המתקדם שלו, נתקבלה התראת אש ממערכת הגילוי. עפ"י הנוהל, הופסקה פעולת המזגנים בבניין מיידית. גם מערכות המיזוג הנפרדות של חדר המחשב הושבתו עם האזעקה. כתוצאה הושבת חדר המחשב. התראת האש היתה התראת שווא.
אמנם הכל עבד כראוי לפי הנוהל, אך הנוהל עצמו נמצא לקוי. בעקבות ניתוח הארוע הוחלט שמערכות המיזוג בחדר המחשב לא יושבתו אלא רק אם התקבלה ההתראה מחדר המחשב עצמו.
יש לכם לקחים שתרצו לחלוק עם הקהילה? כתבו לי.
יגאל שניידר
10 המגמות המובילות בדטה סנטר ב 2010
מרבית חדרי המחשב נמצאים במצוקה ברמת התשתית הפיזית: בעיות מיזוג אוויר קשות, אספקת חשמל, ניהול כבילה לא מוקפד, משקל כבד ביחס ליכולת הנשיאה של הרצפה, חוסר במקום פיזי, חשבון חשמל צומח במהירות ובעיקר: הניהול נהיה מורכב יותר וקשה יותר.
כתוצאה נראה ב 2010 את 10 המגמות הללו צוברות תאוצה:
1. תוכנות ניהול ל Data Center כדוגמת תוכנת ה DC TRACK של חברת Raritan לניהול חדרי מחשב. תוכנה זו מאפשרת ניהול מקצועי של החדר וניצול מקסימאלי של התשתיות המותקנות. לדוגמא, מנהל חדר המקבל לידיו, נניח, 10 שרתים של U1 הצורכים ביחד KW5, יוכל לקבל בלחיצת כפתור את הנתון הבא: באיזה ארון שרתים בחדר יש מקום פיזי, יש שקעי נחושת פנויים, שקעי אופטיקה פנויים, קיבולת חשמל מתאימה, קיבולת מיזוג אוויר מספיק וכ'.
2. Liquid Cooling : לפני כ 5-6 שנים הצגנו את הטכנולוגיה של הקירור הממוקד לשוק הישראלי. רבים מידידנו אמנם התרשמו מהטכנולוגיה אך הטילו ספק בנחיצותה. היום אנו יכולים לומר מעבר לכל ספק שהטכנולוגיה הזו הגיעה לזרם המרכזי. יש לנו כ 400 מערכות מותקנות בישראל מתוך בערך כ 500 סה"כ.
אפשר להזכיר את חדר המחשב של תהיל"ה, חדר המחשב החדש של בנק ישראל, פרויקט מרשים של חיל הים, אינטל (ראו סרט של אינטל ביו טיוב או בפוסט הקודם), חדרי מחשב ברפאל, בחוות מחשוב עננים של טריפל סי ועוד רבים אחרים.
אך יש שני דגשים חשובים מעבר לנושא High Density . המערכות שאנו ממליצים עליהן מסוגלות לתת ביצועים מצוינים גם בטמפרטורות מים קרים של 16 ואף 18 מעלות (במקום 6 מעלות כנהוג במערכות מיזוג אוויר). כל מעלה מאפשרת חיסכון של 3%-4% בחשבון החשמל.
בנוסף חשוב לבחור במערכות מודולאריות. כאלו שמאפשרות לעלות מ 10kw ל kw 40 ללא קושי.
3. סגירת המעבר הקר: המערכות הזולות ביותר, הן אלו שאנו לא צריכים לרכוש. סגירת המעבר הקר מאפשרת שדרוג אפקטיבי של חדרי מחשב קיימים וניצול מקסימאלי של התשתיות הקיימות. מדובר בסגירה מכאנית של האוויר הקר, שדרוג תוכנה למערכות המיזוג ובמקרים מסוימים החלפת מאווררים ביחידות המיזוג. היתרונות: יכולת מיזוג האוויר אפקטיבית יותר ב 50%. כתבו לי לקבלת עותק מוקדם של whitepaper שכתבנו בנושא.
4. בקרה על צריכת האנרגיה ( PUE ) יותר ויותר ארגונים מודדים את ה PUE . יחס יעילות האנרגיה של התשתית. כדי להשתפר, עלינו לדעת היכן אנו היום.
5. Intelligent RPDU : פסי השקעים המתקדמים הם אבן בנין חשובה וחיונית בחדר המחשב המתקדם. RPDU מאפשרים איסוף מידע בזמן אמיתי של צריכת החשמל ופליטת החום של כל שרת וכל ארון, וקבלת מידע לצורך שימור שרידות ויתירות אמת.
6. ניהול הרצפה הצפה פתרונות כגון Cool Boot ו Kold LOK מונעים בריחת אוויר קר מפתחים לא מבוקרים ברצפה הצפה. מאפשר השבת קיבולת קירור "אבודה".
7. פסי צבירה ( Bus Ways ) כאשר תשתית החשמל מבוססת על כבלים, כל שינוי אורך שבועות וחודשים ומצריך תקציב של עשרות ואף מאות אלפי שקלים. שימוש בפסי צבירה מאפשר למנהלי הדטה סנטר לבצע שינויים באופן מיידי ללא צורך בתקציב נוסף. ראו פוסט קודם בנושא פסי צבירה של Starline .
8. ארונות ייעודיים למתגי תקשורת מתגי סיסקו החדשים מחייבים התייחסות מקצועית גם ברמת התשתית. ביחוד ה ,Nexus 7010, 7018. ארונות ייעודיים של Panduit תוכננו יחד עם סיסקו במיוחד למתגים אלו. היתרון: פתרון לנושא הכבילה ומיזוג האוויר.
9. מדבקות RFID מאפשרות לדעת בכל רגע נתון, בזמן אמיתי, אילו מערכות יש לנו בחדר והיכן הן בדיוק. מוכנות ל AUDIT בכל רגע נתון ואבטחת החומרה.
10. סימולציה ב CFD תוכנה הנדסית אשר מאפשרת בניית מודל טרמי של חדר המחשב והדמייה של תרחישים שונים לבדיקת תכנון מיזוג האוויר, אימות יתירות, אפקטיביות התכנון ובחירה בין אלטרנטיבות. מומלץ מאוד גם לתכנון חדר חדש וגם לתכנון שדרוג.
הצצה לחדר המחשב של אינטל ישראל
אינטל ישראל מספקת הצצה נדירה לחדר המחשב שלה. ניתן להתרשם מהסדר וההקפדה על נוהגים מתקדמים( Datacenter Best Practices ) בסרט אותו מנחה עופר ליאור , מנהל הדאטה סנטר באינטל חיפה.
אישית רוויתי נחת מהצגת ארונות High Density המבוססים על קירור מים שסופקו על ידינו, חברת אלכסנדר שניידר. מדובר בארונות Cooltherm תוצרת קנור (Knurr ) , שבהם מחליף החום נמצא בתחתית הארון ( In-Rack Cooling ) . בשל הקירור הממוקד ניתן לקרר עד KW 35 בארון ו/או לחסוך הרבה מאוד כסף בחשבון החשמל. זו המערכת היעילה ביותר ל high density הקיימת היום בשוק.
בכל ארון כזה עובדים 6 בלייד סנטרים ( 84 שרתים) . עוד חשוב לדעת שיחידות אלו צורכות מים קרים בטמפרטורה של 16 מעלות, דבר המקנה לדטה סנטר חיסכון משמעותי בחשבון החשמל וניצול מקסימאלי של יכולות הצ'ילר.
למען הסר ספק, השורות למטה הן תוספות שלי ואינן מוצגות בסרט:
למי שלא עוקב אחרי נושאים אלו ביומיום, אציין שבדרך כלל, מערכות מיזוג אוויר דורשות מים קרים בטמפרטורה של 6-7 מעלות כדי לספק קירור ברמה המתקרבת לטענות אנשי השיווק שלהם.
מערכת כגון זו שלנו, המאפשרת להגיע לקיבולת קירור מליאה ב 16 מעלות מים קרים מספקת את היתרונות הבאים
1. חיסכון של 30% חשבון החשמל לקירור ( 3% לכל מעלת צלזיוס)
2. אין בזבוז אנרגיה הנגרם מהוצאת והשבת לחות לאוויר
3. הצ'ילרים נותנים יותר קיבולת קירור בטמפרטורות מים גבוהות
תודה לאינטל שמשתפת את השוק בתובנות שפיתחה ומסייעת לתעשייה להתייעל ולחסוך באנרגיה חשמלית.
חשבון החשמל של חדרי המחשב בישראל- 1.25 מיליארד שקל בשנה
כ 2000 באי כנס אילות לאנרגיות מתחדשות שנערך באילת בשבוע שעבר, נחשפו לסדרת הרצאות ויוזמות בתחום האנרגיה. בעוד שנותני הטון היו עדיין חסידי האנרגיה הסולארית, קיים הכנס מסלול מרתק בנושא התייעלות אנרגטית. נושא צריכת החשמל של מרכזי המחשוב (דטה סנטר) עלה השנה בלא פחות מארבע הרצאות שונות.
מהחומר עולה כי חדרי המחשב של 1,000 הארגונים הגדולים בישראל צורכים כ 350 מגה-וואט, שהם כ 3% מיכולת היצור של רשת החשמל בישראל. בחשבון פשוט של 42 אג' לקווט"ש, חשבון החשמל של מרכזי המחשוב בישראל הוא 1.25 מיליארד שקל בשנה!
שתי עובדות מוסיפות עניין למספר מדהים זה. האחת, שצריכת החשמל של מרכזי המחשוב צפויה להכפיל עצמה בעוד 4-5 שנים.
השנייה , שכ 40% מסכום זה הם בזבוז שמקורו בחוסר מודעות ובחוקי תכנון מיושנים. במילים אחרות, הפוטנציאל לחיסכון הוא עצום, מה עוד שמחירי האנרגיה צפויים לעלות בשנים הקרובות.
אם כך מדובר בבעיה שיש לה מימד כלכלי נכבד (חשבון החשמל), מימד טכני (ניהול ושרידות), מימד ציבורי (איכות הסביבה) ומימד לאומי, דהיינו, יכולת תשתית החשמל להמשיך לתמוך בצריכה הגוברת של חדרי המחשב.
למרות הסכום העצום, נושא זה לא נמצא בדרך כלל בראש מעינייהם של מקבלי ההחלטות, אלא אם הארגון הוא נאור במיוחד. הסיבות לכך הן רבות:
1. חשבון החשמל אינו משולם על ידי מנהלי חדר המחשב אלא על ידי תקציב מנהלה כללי.
2. ההנהלה אינה מודעת לפוטנציאל החיסכון ולכן גם לא מציבה יעדים בתחום זה
3. חשש מוטעה שצעדי חיסכון והתייעלות דורשים השקעה מרובה ו/או השבתות
4. במקרים רבים מי שאחראי על תכנון והקמת החדר מתמקד ב CAPEX ואינו מתוגמל על חיסכון ב OPEX
במחקר שפרסם הפורום הישראלי לאנרגיה ( http://www.energia.org.il) , נמצא שההשקעה הנדרשת לחיסכון של קילו-ואט שעה אחד הוא עשירית מההשקעה הנדרשת ליצור קווט"ש באמצעים של אנרגיה מתחדשת. למרות זאת, עיקר היוזמה הממשלתית עד כה הוא בתחום האנרגיה המתחדשת. אין שום תוכנית או תמריץ ממשלתי להתייעלות אנרגטית. משלם המיסים ישלם 2 ₪ לכל קווט"ש המיוצר באנרגיה סולרית או אנרגית רוח, אך לא קיים שום עידוד ממשלתי לחיסכון באמצעות התייעלות.
כותבי המחקר, ד"ר שחר דולב, יעל כהן-פארן ונועם סגל, ממליצים בשלב ראשון לקיים סקר אנרגיה ארצי אצל הצרכנים הגדולים, להעלות מהסקר מהן אפשרויות ההתייעלות המרכזיות, ולפעול להטמעת החיסכון באמצעות תמריצים ומיסוי.
בקליפורניה למשל הצליח הממשל למנוע צמיחה בשימוש החשמל לנפש שנשאר יציב מאז שנות ה 80. לא אחת פורסם על מענקים בשווי של מאות אלפי דולרים שהעניקה חברת החשמל המקומית PG&E לפרויקטים של התייעלות אנרגטית בחדרי מחשב בקליפורניה. בישראל משרד התשתיות מתמקד כל כולו באנרגיה מתחדשת ומזניח את הפוטנציאל העצום בהתייעלות אנרגטית.
כפי שנאמר בכנס אילות: אנרגיות מתחדשות – פוליטקלי קורקט. התייעלות אנרגטית – פייננשלי קורקט.
Best Practices: ארונות למתגים של CISCO
לסיסקו מספר סדרות של מתגים ביניהם סדרות ה 9513 Catalyst 6509 , MDS, ולאחרונה סדרת ה Nexus 7000.
נתבקשתי מס' פעמים בחודש האחרון להמליץ על ארון מתאים ( Switch Cabinet ) עבור ה
NEXUS 7018. ראו תמונה 1
תמונה 1: ארון Net-access של Panduit שפותח יחד עם סיסקו עבור ה NEXUS
מתגי CISCO מהווים אתגר בכל הקשור לאחסנה נאותה בארונות חדר המחשב. שני הנושאים המאתגרים ביותר הם
- ניהול החום
- ניהול הכבילה
ניהול חום: מתגי Cisco, ברובם הגדול, פולטים חום לצד ולא לאחור. בארון SWITCH מתקדם, תהיה הכוונה פסיבית של האוויר החם לאחור. ראו תמונה 2 . הכוונה מכאנית זו מאפשרת לשלב את ארונות הסיסקו עם העמדה של מעבר קר ומעבר חם כנהוג וכרצוי בחדרי מחשב.
תמונה 2
ניהול כבילה:
הכבילה המסיבית גורמת להתפרשות על מספר ארונות, אילוץ המביא לבזבוז שטח יקר ולחוסר סדר בכבילה. ארון Switch מתקדם יאפשר שימוש בארון אחד וחיסכון עצום במקום. ראו תמונות 1 ( ארון ל NEXUS ) ותמונה 3 – המראה שלושה מתגי Catalyst 9513 מחווטים למופת בארון אחד.
תמונה 3
למען גילוי נאות, קל לי להמליץ משום שאנו עובדים שנים רבות עם Panduit, החברה שפיתחה יחד עם Cisco את הארונות עבור המתגים הללו. ראו www.panduit.co.il
