Best Practices: ארונות למתגים של CISCO
לסיסקו מספר סדרות של מתגים ביניהם סדרות ה 9513 Catalyst 6509 , MDS, ולאחרונה סדרת ה Nexus 7000.
נתבקשתי מס' פעמים בחודש האחרון להמליץ על ארון מתאים ( Switch Cabinet ) עבור ה
NEXUS 7018. ראו תמונה 1
תמונה 1: ארון Net-access של Panduit שפותח יחד עם סיסקו עבור ה NEXUS
מתגי CISCO מהווים אתגר בכל הקשור לאחסנה נאותה בארונות חדר המחשב. שני הנושאים המאתגרים ביותר הם
- ניהול החום
- ניהול הכבילה
ניהול חום: מתגי Cisco, ברובם הגדול, פולטים חום לצד ולא לאחור. בארון SWITCH מתקדם, תהיה הכוונה פסיבית של האוויר החם לאחור. ראו תמונה 2 . הכוונה מכאנית זו מאפשרת לשלב את ארונות הסיסקו עם העמדה של מעבר קר ומעבר חם כנהוג וכרצוי בחדרי מחשב.
תמונה 2
ניהול כבילה:
הכבילה המסיבית גורמת להתפרשות על מספר ארונות, אילוץ המביא לבזבוז שטח יקר ולחוסר סדר בכבילה. ארון Switch מתקדם יאפשר שימוש בארון אחד וחיסכון עצום במקום. ראו תמונות 1 ( ארון ל NEXUS ) ותמונה 3 – המראה שלושה מתגי Catalyst 9513 מחווטים למופת בארון אחד.
תמונה 3
למען גילוי נאות, קל לי להמליץ משום שאנו עובדים שנים רבות עם Panduit, החברה שפיתחה יחד עם Cisco את הארונות עבור המתגים הללו. ראו www.panduit.co.il
Add comment ינואר 18, 2010
טמפרטורת האוויר הקר בחדרי מחשב
מרבית חדרי המחשב מבזבזים אנרגיה וכסף רב, כך אמר דילן לארסון, דירקטור של Platform technology initiatives בחברת אינטל בדיון שנערך בפורום של מחשוב עננים בהשתתפות חברות כגון יבמ, HP, קנור-אמרסון וLawrence Berkeley National Lab .
במחקר שנערך קודם לדיון ע"י אמרסון בקרב אגוד משתמשי הדטה סנטר ( DCUG ), התברר שמרבית הארגונים מקררים את חדרי המחשב יתר על המידה.
בעוד שהמלצות ASHRAE מתירות לקרר את האוויר הקר המגיע לשרתים לרמה מקסימאלית של 27 מעלות, כל הארגונים שנסקרו ( כ 70) מקררים לטמפרטורת אוויר של 21 מעלות ומטה.
זהו בזבוז, הדגיש דילן לארסן, העלאת הטמפרטורה חוסכת הרבה מאוד חשמל וכסף.
בישראל המצב אף יותר קיצוני. הסיבות לקירור יתר ולבזבוז הנובע מכך הן כדלקמן:
- חוסר מודעות של מנהלי חדרי המחשב לפוטנציאל הגדול לחיסכון בהעלאת הטמפרטורה
- הנחה מוטעית שהמחשבים יתפקדו טוב יותר בטמפרטורות קרות מאוד
- קירור בלתי ממוקד (קירור חדר) מצריך "מאבק" בנקודות חום שונות ולשם כך מקררים את כל החדר יתר על המידה
- חוסר נוחות טבעי מעבודה בקצות הטווח המותר
- ארונות High density שאינם ממוזגים באופן מקצועי וממוקד מכתיבים למעשה את מיזוג אוויר בזבזני
כתוצאה מקירור היתר הזה, על כל שקל המושקע בחשמל ל IT מושקעים עוד שקל עד שניים בתקורה שרובה הוא מיזוג אוויר ( PUE בין 2 ל 3 ) . בזבוז כבר אמרנו?
Add comment ינואר 11, 2010
תכנון אולם מחשב לשרידות ( Tier 4 ) וליעילות בצריכת החשמל
חדר המחשב של BAIS באזור סן פרנסיסקו מספק לנו הצצה מעניינת למתרחש בארה"ב.
אולם המחשב שנחנך לאחרונה, נבנה ל MW 3 עומס IT, וברמת שרידות Tier 4 (לפי הדוברים) . שטח האתר הוא 80,000 רגל רבוע שהם בערך 7400 מ"ר.
משמעות תכנון Tier 4 הוא תכנון לזמינות של 5 תשיעיות ( 99.999% ) כלומר downtime של לא יותר מ 40 דקות בשנה.
החדר בסרט זה תוכנן לפי פעמיים N+1 . אגב, לאחרונה הוריד ה uptime institute את דרישתו לצורך tier 4 ל 2N "בלבד" מטעמי חיסכון באנרגיה.
החדר משתמש במערכות קירור של ליברט , קירור אוויר תת רצפתי וסגירת המעבר הקר. עפ"י הדוברים, סגירת המעבר הקר יעילה כלכלית פי 5 מסגירת המעבר החם. נתון מעניין.
התכנון הוא ל KW 10 לארון בממוצע. הספקים מתוכננים עד ל KW 12 לארון.
בנוסף משתמש החדר במערכות air economizer להזרמת אוויר קר מבחוץ, דרך מערכת מסננים כמובן. לדבריהם, האקלים באזורם מאפשר להם להשתמש ב free cooling כ 20% מהזמן.
PUE=1.4 (בתפוסה מלאה)
Add comment דצמבר 22, 2009
סגירת המעבר הקר בחדרי מחשב ( Cold Aisle Containment )
סגירת המעבר הקר צוברת תאוצה בחדרי מחשב רחבי העולם.
סגירת המעבר הקר מונעת בזבוז של אוויר קר שיוצר ע"י מערכות הקירור. ללא הסגירה, רוב האוויר הקר כלל אינו מגיע לשרתים.
בנוסף, סגירת המעבר הקר מונעת חזרת אוויר חם אל קדמת השרתים, בעיה הקיימת בעיקר כשעומס החום בארון שרתים עולה על 4 קילו-וואט.
מהי סגירת מעבר קר דינמית? בסגירת מעבר קר דינמית חיישנים המוצבים במעבר הקר מתקשרים עם יחידות המיזוג הפנימיות ושולטות על מהירות המאווררים ביחידות אלו. סגירת מעבר קר דינמית נחשבת היום ל BEST PRACTICES .
יתרונות סגירת המעבר הקר הם כדלקמן
- שיפור ביעילות מערכות המיזוג הקיימות.
- 50% שיפור בDensity לארון שרתים, עם יכולת להגיע ל 10 קילוואט עומס לארון שרתים (תלוי ביכולות החדר)
- טמפרטורה אחידה לכל גובה הארון ומניעת תקלות חומרה.
- התקנה קלה ומהירה
- עלות נמוכה עם החזר השקעה מהיר של מס' חודשים עד שנה.
- חיסכון משמעותי בחשבון החשמל (ראו מטה)
- אפשרות לקבל יותר CAPACITY מהצ'ילרים הקיימים (הסבר בפוסט הבא)
להלן נתונים מאמרסון ( Emerson ). סגירת מעבר קר מאפשרת 15% חיסכון בצריכת החשמל למיזוג האוויר ו קרוב לפי 2 מזה (28%) בסגירת מעבר קר דינמית.
| Traditional
Approach |
With Aisle
Containment |
With Emerson SmartAisle | |
| Chiller | 71.3% | 64.9% | 60.0% |
| Pumps | 10.0% | 5.4% | 5.2% |
| Air Handler Fan | 18.7% | 14.3% | 7.2% |
| Total | 100% | 84.6% | 72.4% |
| Savings | 15% | 28% |
דוגמא: אם נניח חדר מחשב עם PUE של 2.5 במצב ההתחלתי, הרי השקעה זעומה בסגירת מעבר קר דינמית תביא חדר זה ל PUE של 2.1 בקירוב.
הבה ניקח כדוגמא חדר מחשב שבו KVA 300 עומס IT .
עם PUE של 2.5 , צריכת החשמל של החדר כולו היא 750 קילוואט שעה בקירוב.
חשבון החשמל השנתי יהיה (במחירים הנוכחיים של 40 אגורות לקווט"ש) 6.5 מיליון שקל בקירוב.
סגירת מעבר קר דינמית תביא את החדר ל PUE של 2.1 ,
החיסכון יהיה 1,050,000 ₪ בשנה.
עלות התקנת מעבר קר דינמית לחדר זה בהערכה גסה , מוערכת 300,000 ₪. כלומר החזר השקעה של 3 עד 4 חודשים.
כמו כן ניתן להכין את תשתית החדר להתקנת יחידות DECS ( מערכות קירור העומדות בין הארונות) בעתיד. מצב זה יאפשר התקנת ארונות high density בעתיד, עד ל KW 30 לארון ואף יותר, ללא עבודות תשתית נוספות.
על ידי סגירת המעבר הקר ניתן, אם כך, לשפר את מצב החדר ולהשיג את היתרונות הכתובים מעלה תוך שימור ההשקעות שנעשו בתשתית, ותוך כדי כך להכינו לעתיד ול high density, כך שהשקעות קפיטאליות ייעשו במדורג ובהתאם לצורך.
Add comment דצמבר 8, 2009
ניהול חדרי מחשב ; הנושאים המעסיקים את מנהלי חוות השרתים
פרסום של ה DataCenter User Group כפי שנמסר בועידת DataCenter Dynamics ביוהנסבורג על ידי חברת Emerson מראה את האתגרים עימם מתמודדים מנהלי חדרי המחשב ( data centers ) וכן השוואה ל שנים 2007 ו 2005
בשנת 2005, שלושת הנושאים החשובים היו:
1. צפיפות חום והספק ( heat and power densities ) ,
2. זמינות מידע ( availability )
3. מחסור בשטח רצפה.
יעילות בצריכת החשמל כלל לא הוזכרה בעשיריה הראשונה.
בשנת 2007 , הנושאים החשובים היו:
1. חום
2. הספק
3. יעילות צריכת החשמל של חדרי המחשב.
כלומר, ב 2007 יעילות צריכת החשמל נהפכה לנושא מרכזי
בשנת 2009 הנושאים החשובים היו:
1.חום ומיזוג אוויר
2. יעילות צריכת החשמל
3. ניהול חדרי המחשב, נושא אליו נתייחס בהרחבה בפוסטים הבאים.
נושא יעילות צריכת החשמל בחדרי המחשב ממשיך להיות במוקד הדאגה של מנהלי חדרי המחשב . זאת בשל המשך הגידול בצריכה בקילו-וואט שעה והעלייה במחירי האנרגיה ( צפי: 10% בשנה). כמו כן, מחסור ב CAPACITY מזרז את פרוייקטי ההתייעלות.
Add comment דצמבר 8, 2009
ארונות שרתים מבוססי קירור מים בבנק ישראל
הדטה סנטר החדש של בנק ישראל נחנך בתחילת חודש אוקטובר בהשתתפות נגיד בנק ישראל סטנלי פישר.
מיזוג האוויר בחוות השרתים של בנק ישראל מבוסס על מערכות קירור שורה CoolLoop של Knurr-Emerson. אלו יחידות המבוססות על קירור מים( KW 30 כ"א ) וממוקמות בין ארונות השרתים. שם המותג הוא coolloop אך השם הגנרי של יחידות אלו הוא DECS אם כי יש כאלו שקוראים להם InRow או Inline.
לטעמי בחירת בנק ישראל במערכות Coolloop של חברת Knurr-Emerson מדגישה את המודעות הגוברת של ארגונים בישראל לחשיבות תכנון וניהול יעיל של חדרי מחשב, תוך מתן דגש על טכנולוגיות "ירוקות" שמביאות לחיסכון משמעותי בהוצאות התפעול. אחד המאפיינים של פרויקטים מסוג זה הוא השימוש במערכות מיזוג אוויר מתקדמות המבוססות על ארונות קירור מים .
טכנולוגיה זו של קירור ממוקד שהצגנו לשוק הישראלי ב 2004, הופכת יותר ויותר לפתרון הנבחר. זאת בשל היכולת לקלוט ולקרר בקלות ארונות מחשוב מתקדם בעל הספקים גבוהים תוך חיסכון משמעותי בחשמל ובשטח רצפה ותוך שיפור שרידות החדר .
בנוסף למערכות מיזוג האוויר הפנימיות, הותקנו בפרויקט זה ארונות שרתים עם מחשבה לעתיד ( למשקל נשיאה של 1500 ק"ג וחירור אופטימאלי של דלתות ל 83% ראו פוסט בנושא best practices לבחירת ארון שרתים ) , ארונות תקשורת של Panduit המיועדים לניהול כבילה מתקדם ומומלצים על ידי סיסקו, מערכות KVM של Raritan וכן פסי שקעים חכמים ( PDU ) עם תוכנות ניהול מתקדמות המאפשרות בקרה על צריכת החשמל בזמן אמיתי .
בשל האיסור לצלם באתר, התמונה המופיעה מעלה היא להמחשה בלבד ולקוחה מאתר אחר בישראל בסדר גודל דומה.
Add comment נובמבר 15, 2009
ניהול רצפה צפה וייעול של מיזוג האוויר ב – Data centers
בסקרים שאנו עורכים בחדרי מחשב אנו מעריכים את כמות האוויר הקר שאינה מגיעה כלל לשרתים ולציוד ה IT. בדרך כלל, למעלה מ 60% מהאוויר הקר המיוצר על ידי מערכות המיזוג כלל אינו מגיע לציוד ה IT . אוויר מבוזבז זה נקרא BYPASS AIR .
בקירור תת רצפתי הנהוג בחדרי מחשב, חלק גדול מן הבזבוז מגיע מפתחי כבילה לא מבוקרים. פתח כבילה של 15X20 ס"מ יכול לגרום לבזבוז של KW 2 קירור, הוצאה מיותרת עצומה של כ 4000 ₪ בשנה.
זו אחת הסיבות לכך שמערכות מיזוג האוויר של חדרי מחשב אינן יעילות. למרות overcapacity , חדר המחשב נמצא במצוקה של חום.
רבים טועים ומניחים שניתן לפתוח פתח בלתי מבוקר במרצפת הצפה אם פתח זה נמצא בתוך הארון. הנחה זו שגויה ופתח כזה עלול לגרום לבעיות רבות.
זו בעיה שהפתרון לה קל, זמין ואינו יקר. הפתרון נקרא KOLDLOK . מעין פתח-מברשת במרצפת הצפה. החזר ההשקעה מוערך ב 2-3 חודשים. להלן סרט הדגמה של Upsite:
Add comment נובמבר 15, 2009
ייצור מגשרים אופטיים
ייצור מגשרים אופטיים בשטח נעשה בדרך כלל על ידי "מייסטר" המגיע ב"ניידת אופטית" עמוס לעייפה במכשירים. זמן ההתקנה הוא ארוך יחסית, ואחוז הנפל גבוה. העלות בהתאם.
הנה סרטון המציג את OPTICAM : מחברים אופטיים באיכות גבוהה שניתן להתקין למגשר בשטח גם על ידי עובד לא מנוסה בקלות ובמהירות, ללא נפל ובאיכות חיבור גבוהה. מכשיר החיבור פשוט מאוד וכולל בדיקת החיבור.
Add comment נובמבר 11, 2009
לחובבי ניהול כבילה בחדר המחשב
לחובבי סדר בחדר המחשב, לאוהבי ניהול כבילה מסודר, כבלים "מסורקים" , הנה אביזר לכאורה פשוט של panduit שמאפשר גם לעובדים פחות מיומנים לייצר איכות מעולה:
Add comment אוקטובר 31, 2009
חדר של חצי מגה וואט ב 20 ארונות שרתים
חדר של חצי מגה-וואט, ב-20 ארונות מקוררי מים. זהו אמנם סרטון פרסומי של קנור-אמרסון אבל מעניין לראות איך עובדים בגרמניה. אגב, זו לא טכנולוגיה אקזוטית. הותקנו מעל 300 ארונות כאלו בישראל.
Add comment אוקטובר 25, 2009