Requisitos de energía del centro de datos. A = W / V ... Debo estar haciendo algo estúpido

12

Bien, nuestro centro de datos no nos cobra en función de nuestro "uso", sino de cuántos amperios hemos entregado a nuestro rack. Estoy planeando instalar un nuevo rack este próximo año para una expansión del servidor, basado en este artículo. Cada servidor tiene una gran cantidad de unidades y, a su vez, utiliza una gran cantidad de energía.

Este estante incluirá.

1 Cisco Router.

1 interruptor de fibra

1 Controlador de almacenamiento de 1U, servidor estándar Dell 850.

11 servidores de almacenamiento de 3U, cada uno con dos fuentes de alimentación de 750 vatios.

Entonces ... estoy tratando de calcular cuántos amperios debería necesitar teóricamente. Todavía no tengo un servidor de ejemplo para ver cuánto tira un servidor de 3U - 45 unidades. Así que supongo que necesita dos fuentes de alimentación, así que vamos con 1000 vatios de tracción. Mucho para los discos duros, mucho para las cosas a bordo. 11 x 1000 vatios es obviamente 11000 vatios de potencia.

A = W / V. W = 11000. V = 120v. A = 91.

Aquí es donde mi cerebro se tropezó. 91 amperios de potencia es pura locura. (lo máximo que he conectado a un cajero automático de rack es 40, y solo tiene una capacidad del 60%.

Y eso con solo 1000w usados ​​por servidor: si la fuente de alimentación extrae la corriente completa a 1500watts para el sistema, eso es algo así como 140 amperios.

.... ¿Suena bien o solo estoy loco? Seguramente hice algo mal, 140 amperios de poder es una locura.

**** Editar: el cuadro es en realidad 4U, por lo que los números son diferentes de los que se muestran aquí, pero no mucho.

grufftech
fuente
+1 por señalarme un artículo realmente genial.
phoebus
¿Encontraste gabinetes de unidades 3U 45? Los gabinetes Equalogic se basan en un chasis de unidades xyratex 4U 48 IIRC. Todas las otras soluciones que conozco con unidades verticales son 4U o 5U, no 3U.
wazoox
Sí, las cajas 3U no existen, no estaba prestando atención cuando escribía este artículo, mi pregunta aún era relevante en el sentido de los cálculos de potencia bajo la carga máxima.
grufftech

Respuestas:

10

Sus cifras suenan como si estuvieran en el camino correcto en general, un disco dual, una caja de procesador dual como un HP DL380 consume aproximadamente 350-450w en promedio, así que agregue 43 x 15-20w para el disco y no estará lejos Kw por chasis. Esto le da dos problemas: necesitará 4 PDU de 32 A para admitir dos PSU y obtendrá una cantidad razonable de calor desde la parte posterior si el bastidor necesita fregado. También sospecho que su empresa de hosting podría quejarse de esto e insistir en que divida su kit entre 2 o más racks.

Dicho esto, no puedo pensar en ninguna otra forma de llevar esa cantidad de discos a esa densidad, ¿qué marca / modelo son las cajas 3U por cierto?

Editar: ¿ya has hecho el cálculo del peso? Deberías pasar eso por ellos también, ese tonto va a ser bastante pesado.

Chopper3
fuente
Buenos puntos, realmente lo aprecio.
grufftech
Mistyped - es 4U.
grufftech
5

Bueno, la intención de las fuentes de alimentación dobles es proporcionar redundancia, no energía adicional como tal, para que sus unidades de 750 vatios me parezcan insuficientes. La configuración del servidor que describe es extremadamente densa: 350-350 para el servidor básico + 45 * 10-15Watts para las unidades y está buscando un kilovatio por servidor y debería instalar 1.2kw PSU que pueden ejecutar eso con un poco de altura libre.

También tendrá que tener algún tipo de giro gradual para las unidades también, el consumo de energía de arranque en las unidades es aproximadamente un 50% mayor que el consumo de energía pico bajo la carga operativa.

En lo que respecta al consumo de energía general, esos números no son tan locos, eso es lo que sucede cuando te pones denso. Un bastidor con 4 gabinetes Blade Dell M1000E completamente poblados consumirá aproximadamente alrededor de 16 (+ -5) kW, que serían 130A en un suministro de 120V. Las fuentes de alimentación para aquellos están clasificadas para entregar 2360 vatios a 12 V, por lo que el consumo máximo de CA es de alrededor de 2500 vatios y necesita un mínimo de 3 para encender el chasis. Su configuración recomendada tiene 6 PSU para proporcionar circuito de CA y fallas múltiples de PSU.

La segunda cosa a la que desea prestar especial atención cuando se vuelve denso es el diseño de enfriamiento. En esas densidades, estás loco si no buscas un diseño de pasillo frío / caliente y el kit en rack necesita estar diseñado para eso. 20 kilovatios son mucho calor en algo tan pequeño como un Rack 42u, y desea asegurarse de que puede bombearlo de manera eficiente con algún nivel de redundancia. A menos que esté colocando este bastidor en el Ártico, debe asegurarse de tener ventiladores redundantes [idealmente intercambiables en caliente] capaces de derivar alrededor de 150 pies cúbicos por minuto, incluso cuando un ventilador ha fallado (suponiendo que esté enfriando 1kw por servidor y pueda vivir con 20 grados caliente :: diferencial frío)

Finalmente, estos realmente van a ser sistemas pesados. Su unidad de servidor va a pesar algo en el rango de 160 libras. Con 11 de esos más todo lo demás que estás planeando más el estante en sí, todo literalmente pesará una tonelada.

El concepto Backblaze se beneficia de ser un componente en una pila de solución integrada que les permite tratar a cada servidor como una unidad intercambiable en caliente con redundancia en la parte superior de la pila, además de la redundancia básica RAID \ PSU \ Fan en las propias unidades de almacenamiento. Eso les permite usar componentes bastante baratos y no tener que hacer ningún esfuerzo en el intercambio en caliente por componentes individuales fallidos; eso tiende a ser otra característica de los sistemas realmente densos y querrás estar seguro de que puedes vivir con ese enfoque.

Helvick
fuente
3

Las cifras me parecen cuerdas. Tenemos varios bastidores que ejecutan 150 AMPS en 208 voltios. Una bestia de un bastidor está tirando actualmente más de 200 AMPS en 208 voltios. Además, como otros han mencionado, verifique el peso del bastidor, será pesado. Algunos de nuestros bastidores de almacenamiento pesan más de 1000 kg. Tenga en cuenta que los amplificadores fluctuarán en función de la carga que haya en su servidor. Esto puede ser de aproximadamente 1 amperio a posiblemente 8-10 amperios con una entrada de 40 amperios en unos pocos ms, sin embargo, unos pocos ms es tiempo suficiente para hacer algunas cosas desagradables si sus servicios al bastidor son menores. Además, como si necesitara más en qué pensar, necesitará tener una secuencia de potencia en el rack para que la maldita cosa no intente comenzar de una vez y realmente absorba los amplificadores.

Liam
fuente
+1 construcción loca, realmente impresionado.
grufftech
2

Veo que su controlador de almacenamiento es un Dell. Si sus servidores de almacenamiento también son Dell, puede que le resulte útil el Dell Data Center Capacity Planner . Le dará orientación sobre el consumo de energía, así como el peso.

hmallett
fuente
servidor basado en Dell estrictamente porque nos dan las mejores ofertas de cajeros automáticos. podría ser una caja personalizada para todo lo que me importa.
grufftech
0

Los cálculos son correctos, basados ​​en la potencia nominal máxima de las PSU.

Probablemente encontrará que cada servidor realmente consume entre 0.5A y 3A durante su uso promedio. La corriente de entrada puede ser tan alta como 40 A por servidor, pero es por un tiempo realmente muy corto, como 20 ms.

Sospecho que estaría buscando más cerca de 20-35A para el bastidor ... Pero podría estar equivocado.

En otra nota, creo que es interesante ver a alguien usando el método de retroceso de ese documento. ¡Me interesaría saber cómo resulta!

Tom O'Connor
fuente
0

Suena cuerdo A modo de comparación: en la mayoría de los bastidores utilizo PDU de 38 KVA duales (una respaldada por diesel, una respaldada por UPS) (entrada de fase triple de 400V, cada fase 32A). Recuerde que la potencia nominal de las unidades de suministro de energía son clasificaciones nominales y que el sistema puede funcionar con solo una de sus unidades de suministro de energía que tiene jugo.

pfo
fuente
1
Este sistema no está diseñado para funcionar con una sola fuente de alimentación, en realidad usa ambas fuentes de alimentación para alimentar diferentes áreas del sistema. (Estamos hablando de 46
discos duros
PFO, tus números parecen correctos para los EE. UU. (La compañía para la que trabajo fabrica software de análisis de carga eléctrica y estos son números muy familiares) Gruff, su problema se va a enfriar, y Twin 32A-3phase suministra :)
Tim Williscroft
@GruffTech: ¿Entonces los estantes no son redundantes?
pfo
sí, el diseño Backblaze trata los estantes como la unidad que se va a reemplazar, mencionan que en el artículo, por lo tanto, no se trata de una solución de almacenamiento de uso general, sino que forman parte de una pila más grande con redundancia provista mediante franjas en múltiples estantes.
Helvick
0

Aquí hay algunas opciones para ayudarlo a evaluar sus requisitos.

De forma económica, puede conectar un Kill-A-Watt a cada dispositivo y obtener algunas mediciones del mundo real. (tenga cuidado de no hacer esto en un LAB, un servidor cargado lleva una carga de energía mucho mayor que un servidor inactivo)

Un servidor a menudo aumentará su carga en el arranque inicial. Ten eso en mente. (si hay un corte de energía y todo se enciende a la vez, puede dispararse)

Alternativamente, obtenga una PDU como APC 7901 (o dispositivo similar) que tenga una lectura LED del consumo actual de AMP. (El 7901 es solo un modelo de 20 amperios)

Nuestra parte superior de los conmutadores de bastidor y los conmutadores de fibra de Cisco rara vez superan los 80W. * YMMV

Su DC solo puede ofrecerle opciones de 20 y 30 amperios, por lo que puede ser discutible.

Su DC también puede proporcionarle 208V de potencia como opción.

Una broma: creo que todos los que cobran por la energía entregada y la energía usada deberían enchufar algunos calentadores espaciales para asegurarse de que usen todo lo que están pagando. :)

Espero que esto ayude.

Joel K
fuente
Apuesto a que los autores del blog podrían decirte su uso real de energía ...
Joel K
0

Las cifras de la placa de identificación en los equipos de TI son cifras de seguridad / reglamentarias, y usted estará sobreconstruyendo si las usa para diseñar cosas. Solicite a su proveedor el "Informe térmico del equipo ASHRAE" para el equipo en cuestión. Cualquier vendedor importante lo tendrá.

Ese informe le dará algunas cifras que serán más realistas.

duffbeer703
fuente