A Amazon disse que chega amanhã. Não vou precisar acordar cedo para trocar a bateria, nem deixar a instância offline.
Mas vou precisar desligar o servidor físico, conectar ele direto na tomada e ligar de novo.
Aí quando eu terminar de trocar a bateria, desligar o servidor de novo e conectar no nobreak.