Nel 1936, Sir Hallam Holland (Ed Stoppard) e sua giovane e bella moglie Lady Agnes (Keeley Hawes) tornano da un incarico diplomatico all'estero e si stabiliscono al 165 Eaton Place, precedentemente la casa della famiglia Bellamy ma vuota da diversi anni.
Per caso, chiedono a Rose Buck (Jean Marsh), una servitrice di lunga data nella casa dei Bellamy, di trovare loro un personale adatto. Alla fine, Rose si unisce a loro come governante.
Gli anni '30 sono un periodo difficile in Inghilterra. La Depressione ha avuto il suo tributo con alti livelli di disoccupazione. Il fascismo, che è diventato popolare sul continente in Italia e Germania, sta trovando seguaci anche nel Regno Unito con l'Unione Britannica dei Fascisti di Oswald Mosely.
Mentre il nuovo personale inizia il loro lavoro quotidiano, la famiglia al piano di sotto inizia a prendere forma.