Posts filed under 'Data center'
חוות מחשוב עננים של Triple C
טריפל סי חנכה חדר מחשב חדש המתוכנן, על פי המנכ"ל רמי נחום, לרמת שרידות גבוהה של Tier 4 . הסרט מספק תאור מעניין של יכולות החווה שהיא ללא ספק מהמתקדמות בארץ.
מזל טוב ל טריפל סי.
Add comment מרץ 9, 2010
טמפרטורת האוויר הקר בחדרי מחשב
מרבית חדרי המחשב מבזבזים אנרגיה וכסף רב, כך אמר דילן לארסון, דירקטור של Platform technology initiatives בחברת אינטל בדיון שנערך בפורום של מחשוב עננים בהשתתפות חברות כגון יבמ, HP, קנור-אמרסון וLawrence Berkeley National Lab .
במחקר שנערך קודם לדיון ע"י אמרסון בקרב אגוד משתמשי הדטה סנטר ( DCUG ), התברר שמרבית הארגונים מקררים את חדרי המחשב יתר על המידה.
בעוד שהמלצות ASHRAE מתירות לקרר את האוויר הקר המגיע לשרתים לרמה מקסימאלית של 27 מעלות, כל הארגונים שנסקרו ( כ 70) מקררים לטמפרטורת אוויר של 21 מעלות ומטה.
זהו בזבוז, הדגיש דילן לארסן, העלאת הטמפרטורה חוסכת הרבה מאוד חשמל וכסף.
בישראל המצב אף יותר קיצוני. הסיבות לקירור יתר ולבזבוז הנובע מכך הן כדלקמן:
- חוסר מודעות של מנהלי חדרי המחשב לפוטנציאל הגדול לחיסכון בהעלאת הטמפרטורה
- הנחה מוטעית שהמחשבים יתפקדו טוב יותר בטמפרטורות קרות מאוד
- קירור בלתי ממוקד (קירור חדר) מצריך "מאבק" בנקודות חום שונות ולשם כך מקררים את כל החדר יתר על המידה
- חוסר נוחות טבעי מעבודה בקצות הטווח המותר
- ארונות High density שאינם ממוזגים באופן מקצועי וממוקד מכתיבים למעשה את מיזוג אוויר בזבזני
כתוצאה מקירור היתר הזה, על כל שקל המושקע בחשמל ל IT מושקעים עוד שקל עד שניים בתקורה שרובה הוא מיזוג אוויר ( PUE בין 2 ל 3 ) . בזבוז כבר אמרנו?
Add comment ינואר 11, 2010
תכנון אולם מחשב לשרידות ( Tier 4 ) וליעילות בצריכת החשמל
חדר המחשב של BAIS באזור סן פרנסיסקו מספק לנו הצצה מעניינת למתרחש בארה"ב.
אולם המחשב שנחנך לאחרונה, נבנה ל MW 3 עומס IT, וברמת שרידות Tier 4 (לפי הדוברים) . שטח האתר הוא 80,000 רגל רבוע שהם בערך 7400 מ"ר.
משמעות תכנון Tier 4 הוא תכנון לזמינות של 5 תשיעיות ( 99.999% ) כלומר downtime של לא יותר מ 40 דקות בשנה.
החדר בסרט זה תוכנן לפי פעמיים N+1 . אגב, לאחרונה הוריד ה uptime institute את דרישתו לצורך tier 4 ל 2N "בלבד" מטעמי חיסכון באנרגיה.
החדר משתמש במערכות קירור של ליברט , קירור אוויר תת רצפתי וסגירת המעבר הקר. עפ"י הדוברים, סגירת המעבר הקר יעילה כלכלית פי 5 מסגירת המעבר החם. נתון מעניין.
התכנון הוא ל KW 10 לארון בממוצע. הספקים מתוכננים עד ל KW 12 לארון.
בנוסף משתמש החדר במערכות air economizer להזרמת אוויר קר מבחוץ, דרך מערכת מסננים כמובן. לדבריהם, האקלים באזורם מאפשר להם להשתמש ב free cooling כ 20% מהזמן.
PUE=1.4 (בתפוסה מלאה)
Add comment דצמבר 22, 2009
סגירת המעבר הקר בחדרי מחשב ( Cold Aisle Containment )
סגירת המעבר הקר צוברת תאוצה בחדרי מחשב רחבי העולם.
סגירת המעבר הקר מונעת בזבוז של אוויר קר שיוצר ע"י מערכות הקירור. ללא הסגירה, רוב האוויר הקר כלל אינו מגיע לשרתים.
בנוסף, סגירת המעבר הקר מונעת חזרת אוויר חם אל קדמת השרתים, בעיה הקיימת בעיקר כשעומס החום בארון שרתים עולה על 4 קילו-וואט.
מהי סגירת מעבר קר דינמית? בסגירת מעבר קר דינמית חיישנים המוצבים במעבר הקר מתקשרים עם יחידות המיזוג הפנימיות ושולטות על מהירות המאווררים ביחידות אלו. סגירת מעבר קר דינמית נחשבת היום ל BEST PRACTICES .
יתרונות סגירת המעבר הקר הם כדלקמן
- שיפור ביעילות מערכות המיזוג הקיימות.
- 50% שיפור בDensity לארון שרתים, עם יכולת להגיע ל 10 קילוואט עומס לארון שרתים (תלוי ביכולות החדר)
- טמפרטורה אחידה לכל גובה הארון ומניעת תקלות חומרה.
- התקנה קלה ומהירה
- עלות נמוכה עם החזר השקעה מהיר של מס' חודשים עד שנה.
- חיסכון משמעותי בחשבון החשמל (ראו מטה)
- אפשרות לקבל יותר CAPACITY מהצ'ילרים הקיימים (הסבר בפוסט הבא)
להלן נתונים מאמרסון ( Emerson ). סגירת מעבר קר מאפשרת 15% חיסכון בצריכת החשמל למיזוג האוויר ו קרוב לפי 2 מזה (28%) בסגירת מעבר קר דינמית.
| Traditional
Approach |
With Aisle
Containment |
With Emerson SmartAisle | |
| Chiller | 71.3% | 64.9% | 60.0% |
| Pumps | 10.0% | 5.4% | 5.2% |
| Air Handler Fan | 18.7% | 14.3% | 7.2% |
| Total | 100% | 84.6% | 72.4% |
| Savings | 15% | 28% |
דוגמא: אם נניח חדר מחשב עם PUE של 2.5 במצב ההתחלתי, הרי השקעה זעומה בסגירת מעבר קר דינמית תביא חדר זה ל PUE של 2.1 בקירוב.
הבה ניקח כדוגמא חדר מחשב שבו KVA 300 עומס IT .
עם PUE של 2.5 , צריכת החשמל של החדר כולו היא 750 קילוואט שעה בקירוב.
חשבון החשמל השנתי יהיה (במחירים הנוכחיים של 40 אגורות לקווט"ש) 6.5 מיליון שקל בקירוב.
סגירת מעבר קר דינמית תביא את החדר ל PUE של 2.1 ,
החיסכון יהיה 1,050,000 ₪ בשנה.
עלות התקנת מעבר קר דינמית לחדר זה בהערכה גסה , מוערכת 300,000 ₪. כלומר החזר השקעה של 3 עד 4 חודשים.
כמו כן ניתן להכין את תשתית החדר להתקנת יחידות DECS ( מערכות קירור העומדות בין הארונות) בעתיד. מצב זה יאפשר התקנת ארונות high density בעתיד, עד ל KW 30 לארון ואף יותר, ללא עבודות תשתית נוספות.
על ידי סגירת המעבר הקר ניתן, אם כך, לשפר את מצב החדר ולהשיג את היתרונות הכתובים מעלה תוך שימור ההשקעות שנעשו בתשתית, ותוך כדי כך להכינו לעתיד ול high density, כך שהשקעות קפיטאליות ייעשו במדורג ובהתאם לצורך.
Add comment דצמבר 8, 2009
ניהול חדרי מחשב ; הנושאים המעסיקים את מנהלי חוות השרתים
פרסום של ה DataCenter User Group כפי שנמסר בועידת DataCenter Dynamics ביוהנסבורג על ידי חברת Emerson מראה את האתגרים עימם מתמודדים מנהלי חדרי המחשב ( data centers ) וכן השוואה ל שנים 2007 ו 2005
בשנת 2005, שלושת הנושאים החשובים היו:
1. צפיפות חום והספק ( heat and power densities ) ,
2. זמינות מידע ( availability )
3. מחסור בשטח רצפה.
יעילות בצריכת החשמל כלל לא הוזכרה בעשיריה הראשונה.
בשנת 2007 , הנושאים החשובים היו:
1. חום
2. הספק
3. יעילות צריכת החשמל של חדרי המחשב.
כלומר, ב 2007 יעילות צריכת החשמל נהפכה לנושא מרכזי
בשנת 2009 הנושאים החשובים היו:
1.חום ומיזוג אוויר
2. יעילות צריכת החשמל
3. ניהול חדרי המחשב, נושא אליו נתייחס בהרחבה בפוסטים הבאים.
נושא יעילות צריכת החשמל בחדרי המחשב ממשיך להיות במוקד הדאגה של מנהלי חדרי המחשב . זאת בשל המשך הגידול בצריכה בקילו-וואט שעה והעלייה במחירי האנרגיה ( צפי: 10% בשנה). כמו כן, מחסור ב CAPACITY מזרז את פרוייקטי ההתייעלות.
Add comment דצמבר 8, 2009
ארונות שרתים מבוססי קירור מים בבנק ישראל
הדטה סנטר החדש של בנק ישראל נחנך בתחילת חודש אוקטובר בהשתתפות נגיד בנק ישראל סטנלי פישר.
מיזוג האוויר בחוות השרתים של בנק ישראל מבוסס על מערכות קירור שורה CoolLoop של Knurr-Emerson. אלו יחידות המבוססות על קירור מים( KW 30 כ"א ) וממוקמות בין ארונות השרתים. שם המותג הוא coolloop אך השם הגנרי של יחידות אלו הוא DECS אם כי יש כאלו שקוראים להם InRow או Inline.
לטעמי בחירת בנק ישראל במערכות Coolloop של חברת Knurr-Emerson מדגישה את המודעות הגוברת של ארגונים בישראל לחשיבות תכנון וניהול יעיל של חדרי מחשב, תוך מתן דגש על טכנולוגיות "ירוקות" שמביאות לחיסכון משמעותי בהוצאות התפעול. אחד המאפיינים של פרויקטים מסוג זה הוא השימוש במערכות מיזוג אוויר מתקדמות המבוססות על ארונות קירור מים .
טכנולוגיה זו של קירור ממוקד שהצגנו לשוק הישראלי ב 2004, הופכת יותר ויותר לפתרון הנבחר. זאת בשל היכולת לקלוט ולקרר בקלות ארונות מחשוב מתקדם בעל הספקים גבוהים תוך חיסכון משמעותי בחשמל ובשטח רצפה ותוך שיפור שרידות החדר .
בנוסף למערכות מיזוג האוויר הפנימיות, הותקנו בפרויקט זה ארונות שרתים עם מחשבה לעתיד ( למשקל נשיאה של 1500 ק"ג וחירור אופטימאלי של דלתות ל 83% ראו פוסט בנושא best practices לבחירת ארון שרתים ) , ארונות תקשורת של Panduit המיועדים לניהול כבילה מתקדם ומומלצים על ידי סיסקו, מערכות KVM של Raritan וכן פסי שקעים חכמים ( PDU ) עם תוכנות ניהול מתקדמות המאפשרות בקרה על צריכת החשמל בזמן אמיתי .
בשל האיסור לצלם באתר, התמונה המופיעה מעלה היא להמחשה בלבד ולקוחה מאתר אחר בישראל בסדר גודל דומה.
Add comment נובמבר 15, 2009
לחובבי ניהול כבילה בחדר המחשב
לחובבי סדר בחדר המחשב, לאוהבי ניהול כבילה מסודר, כבלים "מסורקים" , הנה אביזר לכאורה פשוט של panduit שמאפשר גם לעובדים פחות מיומנים לייצר איכות מעולה:
Add comment אוקטובר 31, 2009
הגדרות היתירות של חדרי מחשב ( Tier System )
חברות שלהן חדרי מחשב צריכות לאזן בין שני צרכים. הצורך ברציפות עסקית לעומת הצורך בחיסכון בהשקעות ( CAPEX) ובהוצאות התפעול ( OPEX ) .
מחד גיסא, הצורך בזמינות מידע ורציפות עסקית מכתיב יתירות בתכנון תשתית חדר המחשב. מאידך גיסא, יתירות עולה כסף. יתירות מכתיבה השקעות משמעותיות בחומרה והוצאות תפעול גבוהות יותר בחשבון החשמל ובחוזי שירות. על כן, על המנמ"ר להגדיר במדויק מה רמת היתירות הנדרשת בחדר שלו ולהבין את ההשלכות העסקיות כולן.
רמת היתירות מוגדרת על פי 4 רמות ( Tiers ): מרמה 1 ( Tier I ) עד רמה 4 ( Tier IV ) . הגדרת הרמות נעשתה על יד מכון האפטיים ( www.uptimeinstitute.org ) שהוא האורים והתומים בתחום חדרי המחשב.
חדרי מחשב ברמות I ו II נועדו לתת מענה לטווח קצר ולתמוך בטכנולוגיה הנוכחית בלבד. אלו פתרונות טקטיים שבהם שיקול העלות הוא שיקול כמעט בלעדי. במקומות בהם ל IT חשיבות אסטרטגית נחוץ פתרון ברמות III ו IV שנותנים מענה לרציפות העסקית ומאפשרים קליטת טכנולוגיה חדישה בקלות יחסית.
Tier I: בחדר מחשב ברמה I ניתן ביטוי לרצון החברה להכיל את ציוד ה IT בתחום בו יש תשתית מתאימה (בניגוד, למשל, לתשתית משרדית). חדר רמה 1 טיפוסי יהיה חדר מחשב סגור, מערכת אל-פסק ( UPS ) שתייצב את המתח ותיתן מענה להפסקות חשמל קצרות, מערכת מיזוג אוויר 24/7 וגנראטור להפסקות חשמל ארוכות יותר. אין יתירות ( רמה N ). אין אפשרות לביצוע טיפולים בציוד התשתית ללא השבתה. כמו כן, במקרה של תקלה בציוד התשתית, יסבול האתר מהשבתות.
Tier II: בחדר מחשב ברמה II תהיה יתירות כלשהי למערכות קריטיות של חשמל ומיזוג אוויר. בדרך כלל היתירות ( N+1 ) תהיה במערכות כגון UPS, צ'ילרים, משאבות וגנראטור. טיפולי שירות תקופתיים יגרמו להשבתות. תקלות חומרה במרכיבי התשתית יכולים גם הם לגרום לקריסת החדר באופן זמני.
Tier III: בחדר מחשב ברמה III התכנון מאפשר טיפולי שירות לתיקון ומניעה ללא השבתה ( concurrent maintenance ). כלומר, ניתן להשבית כל רכיב תשתית כגון UPS, ארון חשמל או יחידת מיזוג ללא השבתה של ציוד IT. לכל מוליך תשתית פעיל יהיה "תאום" פסיבי שיכנס לעבודה במקרה של כשל במוליך הפעיל. גם כאן היתירות במערכות היא ברמה של ( N+1). ההבדל הגדול הוא שבאתר זה ניתן לבצע עבודות שירות תקופתיות מה שיקטין בודאי גם את מס' התקלות.
Tier IV : חדר מחשב ברמה IV הוא אל-כשל ( Fault Tolerant ) . יש בו את כל מה שנכלל ברמה III אך שום כשל בודד אינו יכול לגרום להשבתה מליאה או חלקית. כל מרכיבי התשתית פעילים בו זמנית.
ברור שאם מערכת המיזוג מתוכנת לפי רמה II אך מערכת החשמל לפי רמה I, חדר המחשב הוא ברמה I. דירוג חדר ברמה 2.5 זו המצאה ישראלית שאין לה אחיזה בתורה המקצועית.
בעת תכנון ושדרוג חדרי מחשב, חשוב שהמנמ"ר יגדיר במדויק את צרכי הארגון בכל הקשור לרציפות העסקית. שיטת הדרוג ל 4 רמות מאפשרת למנמר בחינה מסודרת של עלות מול תועלת.
1 comment יוני 17, 2009
טעויות נפוצות בהעברת חדרי מחשב
כל פרויקט של העברת חדר מחשב ממיקום אחד למיקום אחר הוא שונה ומיוחד. בכנס המנמרים בבולגריה ריכלנו על חברת סלקום שבצעה לא מזמן פרויקט העברה מצוין שזכה להערכה רבה. עם זאת, פרויקטים אחרים רבים נכשלים או נתקלים בבעיות שגורמות לעיכובים, הוצאות ו downtime ארוך מהמתוכנן.
לדוגמא, פרויקט אחד התעכב משום שבעת ההעברה הסתבר שפסי השקעים שהותקנו באתר החדש לא היו מתאימים. נושא זה עיכב את ההעברה שהייתה אמורה להתרחש במהלך סוף השבוע עד לאספקת והחלפת פסי השקעים. במקרה אחר, סימון לא מדויק של כבלים אופטיים גרם לחיווט לא נכון של מערכות תקשורת ולעיכובים ופגיעה ברציפות העסקית. במקרה שלישי , נהג מלגזה לא מנוסה ( וגם ללא רישיון) הפיל מתג והחל מחול מטורף להחלפת החומרה. מאחר והחברה לא חזתה סיכון זה, עברו מס' ימים עד להחלפת החומרה.
קל אם כך להבין מדוע פרויקטים של העברה נכשלים. בסופו של דבר נמצא הפתרון אך התהליך הלא מושלם יקר וגורם להפרעות ברציפות העסקית.
אנו, באלכסנדר שניידר זיהינו 5 טעויות נפוצות שיכולות לטרפד פרויקט העברה
1. חברות לא יודעות מה נקודת הפתיחה שלהן. חברות לא יודעות במדויק מה יש להן ומה הן מעבירות. אין מיפוי של התלות בין היחידות השונות.
2. לא מתוכנן המיקום המדויק של כל הציוד שעובר. ההנחה שיש מקום להכל וש"זה יסתדר" אינה עובדת בד"כ.
3. היעדר תוכנית העברה מפורטת כולל מי אחראי למה ומתי.
4. היעדר זיהוי סיכונים והיעדר תוכנית מניעה והורדת סיכונים.
5. ביצוע לקוי בשל יועצים, מובילים וקבלנים לא מנוסים ובחירת ספקים לפי קריטריון מחיר. פרויקטים של העברת חדרי מחשב נכשלים בגלל סיבות רבות אך ניתן למנוע כמעט את כולן. דבר אחד בטוח: זהו פרויקט חשוב ורגיש שיש לו השפעה רבה על הרציפות העסקית של הארגון ועל יוקרת המנמר.
אנו בחברת אלכסנדר שניידר ממליצים על המתודולוגיה הבאה:
1. דע מה נקודת המוצא. החל בסקר מפורט של חדר המחשב הישן. ערוך רשימת מצאי וקישורים. בחן מה סדרי העדיפויות של הארגון ומה האילוצים. בחן היטב את תשתית החשמל והמיזוג של האתר החדש לפני ההעברה.
2. תכנן את האסטרטגיה של ההעברה. הגע להסכמה עם הלקוחות הפנימיים מה ניתן להשבית ומתי. הבן את יכולות אתר ה DR אם הוא קיים. ערוך סקר סיכונים. הבן את הסיכונים והכן אלטרנטיבה לכל תקלה.
3. הכן תוכנית מפורטת כולל לו"ז וקבע אחריות שמית לכל משימה. תכנן ברמת תוכנית העמדה לחדר וברמת התקנות בכל ארון. בדוק מה התלות ההדדית שבין השלבים השונים. צפה סיכונים וערוך תוכנית לצמצום הסיכונים.
4. כנס את הצוות ועבור על תוכנית הסיכונים. יתכן ששיקולי עלות יגרמו לך לקחת סיכון מחושב. זה בסדר כל עוד זה נעשה במחשבה תחילה.
5. מנה מנהל מנוסה לתיאום בין הקבלנים, הספקים וצוות ה IT. בפרה-פרזה על דברי אפרים קישון, מחקר של סוציולוגים סקנדינביים מצא שעבודה רצופה במשך 36 שעות גורמת לעייפות וטעויות. הכן צוותי גיבוי רעננים והחלף עובדים כל 12 שעות לכל היותר .
פרויקט העברה של חדר מחשב חשוב מידי מכדי לסמוך על המזל. ארגונים שיקפידו על יישום חמש הנקודות הנ"ל ישפרו במידה ניכרת את סיכויי הצלחת הפרויקט.
Add comment יוני 11, 2009
הקמה מהירה של אתרי DR – disaster recovery
הסרט ממחיש יכולת פריסה מהירה של חדר מחשב מבוסס קונטיינר בשטח. לאחר הכנה מתאימה, ניתן לשנע לפרוס ולהעלות חדרי מחשב בגדלים שונים ( עומס כולל מ 100 קילווואט עד 350 קילו-וואט ) תוך שעות ספורות. מתאים מאוד ליישומי DR.
חדר המחשב בסרטון זה מחולק לשני קונטיינרים: אחד ל IT ובו ארונות שרתים ואחסון והקונטיינר השני מיועד למערכות תשתית כגון צ'ילר ואל-פסק ( services ) . שני הקונטיינרים מצוידים במערכות גילוי וכיבוי, מערכות בקרה והתראה, שו"ב, והתקנים שונים כמצופה מחדר מחשב שתוכנן לפי best practices.
יש אפשרות גם לגנרטור בקונטיינר ( containerized generator ) או לאחד את שני הקונטיינרים בקונטיינר ארוך יותר של 40 רגל או 53 רגל.
פתרון זה דומה מאוד ל PMDC של חברת יבמ.
Add comment מאי 25, 2009