Em 1936, Sir Hallam Holland (Ed Stoppard) e sua jovem e bonita esposa Lady Agnes (Keeley Hawes) retornam de uma missão diplomática no exterior e se estabelecem na residência do 165 Eaton Place, anteriormente lar da família Bellamy, mas vago por vários anos.
Por acaso, eles pedem a Rose Buck (Jean Marsh), uma serva de longa data na casa dos Bellamy, para encontrar um staff adequado. No final, Rose se junta a eles como governanta.
Os anos 1930 são um período difícil na Inglaterra. A Depressão causou um alto nível de desemprego. O fascismo, que se tornou popular no continente em países como Itália e Alemanha, também está encontrando seguidores no Reino Unido com a União Britânica de Fascistas de Oswald Mosely.
Conforme o novo staff começa seu trabalho diário, a família que vive no andar de baixo começa a se formar.