A potência de design térmico é uma especificação de design ao nível do componente, enquanto a potência medida na tomada é o consumo elétrico de entrada de todo o servidor de IA.
Um processador identificado com uma potência térmica de 65 watts não significa que um sistema completo de IA doméstico consuma 65 watts da tomada. A memória, o armazenamento, o acelerador, a conversão da motherboard, as ventoinhas, os dispositivos de rede e as perdas da fonte de alimentação contribuem todos para o consumo. Os limites de boost, a fase da carga de trabalho, o estado de inatividade, a temperatura ambiente e as definições do fabricante também podem separar as especificações dos componentes do consumo de energia observado.
O TDP define um ponto de design térmico ou de potência base
O TDP é utilizado para dimensionar o arrefecimento e caracterizar um processador sob uma carga de trabalho especificada ou numa condição de funcionamento base. Não é um método de medição universal entre todos os fabricantes e gerações, nem soma todos os componentes instalados no servidor.
A definição de TDP da Intel define o TDP em watts para o design do sistema e indica que os produtos mais recentes utilizam a terminologia Processor Base Power. A definição está associada às especificações de funcionamento, não é uma promessa de que todas as cargas de trabalho consumam um valor fixo.
A inferência de IA alterna entre o carregamento do modelo, o prefill do prompt, a descodificação de tokens e períodos de inatividade. Picos curtos do boost ou do acelerador podem ultrapassar o ponto de design nominal do processador, enquanto o consumo médio do sistema ao longo do tempo permanece inferior ou superior por razões completamente diferentes.
A potência medida na tomada inclui toda a cadeia de conversão
Um medidor de tomada observa a entrada de corrente alternada na fonte de alimentação. O servidor consome corrente contínua convertida, e a diferença transforma-se em perdas de conversão, cuja proporção varia consoante a carga, a tensão, o design da fonte de alimentação e a eficiência. Os switches ligados ou as caixas de discos externas só contam se fizerem parte do limite de medição.
Os critérios de utilização de energia do sistema da ENERGY STAR avaliam o consumo energético dos computadores ao nível do sistema e distinguem os modos de funcionamento. Esse limite mais abrangente está mais próximo do custo de eletricidade doméstico do que uma especificação térmica do processador. Esta distinção continua visível durante os testes domésticos posteriores.
A potência medida na tomada também inclui a atualização da memória, os discos, as ventoinhas, os controladores da motherboard, os dispositivos USB e o consumo em inatividade do acelerador. Assim, dois sistemas com o mesmo TDP do CPU podem ter consumos de energia diferentes em inatividade e durante a inferência. O resultado intermédio tem de continuar a ser inspecionável antes de avançar para a automatização.
A capacidade de arrefecimento e o custo energético respondem a perguntas diferentes
O design do arrefecimento tem de lidar com onde e como o calor é libertado, incluindo os limites sustentados dos componentes e a recirculação do ar. O planeamento elétrico precisa de watts medidos ao longo do tempo, procura de pico, perdas da UPS e, por vezes, equipamento de rede ou armazenamento de suporte. Um único número não pode substituir o outro em segurança.
Uma explicação detalhada das limitações do TDP explica por que razão o TDP não conta toda a história do consumo de energia e destaca as definições dos fabricantes e o comportamento das cargas de trabalho. Apoia a utilização das especificações para o dimensionamento inicial e da medição direta para o sistema instalado.
O limite de falha consiste em tratar uma média medida na tomada como prova de que o arrefecimento é adequado durante os picos, ou em tratar a soma dos TDP como uma previsão do consumo de eletricidade. A limitação térmica, as curvas das ventoinhas, a eficiência da PSU e o ciclo de trabalho têm de permanecer visíveis.
Meça a potência na tomada em inatividade, em funcionamento sustentado e durante picos
Utilize um medidor de tomada fiável e registe o arranque, a inatividade, o carregamento do modelo, um prefill prolongado, a descodificação estável, a inferência de visão, a atividade dos discos e as cargas de trabalho combinadas no pior caso. Registe a telemetria dos componentes, a temperatura, a frequência, a velocidade das ventoinhas e a limitação térmica juntamente com os watts medidos na tomada, utilizando uma frequência de amostragem que capte os picos relevantes.
Interprete a temperatura da caixa utilizando a comparação do fluxo de ar em calor na caixa. Defina se o medidor inclui o NAS, o switch e a caixa do acelerador e, em seguida, calcule a energia por tarefa e os watt-hora diários, em vez de comparar apenas os picos instantâneos.
Dimensione o arrefecimento e a alimentação com base nos limites documentados e no comportamento sustentado e transitório medido. Utilize as medições na tomada para o consumo energético doméstico e o planeamento da UPS, e nunca infira o consumo total do servidor a partir da especificação térmica de um único processador ou acelerador.
Centro de Tecnologia e IA
Mais para Ler

As câmaras domésticas conseguem sincronizar eventos sem serviços de hora na nuvem?
Uma explicação baseada primeiro no mecanismo do tempo da câmara sem cloud, as suas contrapartidas na partilha de recursos, três perguntas frequentes sobre a...

Um serviço de IA local consegue detetar camadas de modelos corrompidas antes da inferência?
Uma explicação baseada primeiro no mecanismo da deteção de corrupção na camada do modelo, dos seus compromissos em termos de recursos partilhados, de três...

É possível restaurar um sistema RAG sem regenerar todos os embeddings?
Uma explicação, centrada no mecanismo, do restauro de RAG sem re-embedding, das suas contrapartidas em recursos partilhados, de três perguntas frequentes sobre a expansão...

