Reverse proxy - felsida vid död upstream?

Har en site som sitter bakom nginx reverse proxy (som även terminerar https) och EJ är lastbalancerad. Det jag skulle vilja göra är att visa en statisk felsida, typ "Sidan är nere för underhåll", om en hälsokontroll misslyckas (dvs siten är nere av någon anledning). Hur åstadkommer man lättast detta? När jag kollar på load balancing ser det ut som att alla algoritmer sprider ut trafiken över alla specade servrar, men det jag vill ha är typ välj server 1 så länge den fungerar, annars server 2. Eller finns det andra/bättre sätt att lösa det här? Nginx kan bytas mot haproxy eller caddy eller nåt annat om det kan tänkas göra nån skillnad.