Le personnel de Downton Abbey et la famille Crawley ont fort à faire avec les préparations de Noël. La gaîté est pourtant difficilement de mise en ce jour de fête. La relation entre Matthieu et Lady Mary prend une autre tournure. Elle repousse son fiancé Sir Richard Carlisle, malgré sa menace de révéler son secret sombre en ce qui concerne Pamuk Kemal. Sans compter le procès de Bates qui se répand comme un voile sombre autour de ces festivités. Sera-t-il jugé coupable du meurtre de son épouse ?

Septembre 1921. Lord Grantham et les siens vont dans les Highlands pour des vacances estivales : c'est leur visite annuelle de la branche écossaise de la famille, les Flintshire. Comme tous les ans, ils séjournent à Duneagle Castle, la vaste propriété des parents de Lady Rose, la jeune et turbulente petite nièce de Lady Violet. L'accueil est chaleureux, mais les tensions qui existent entre les Crawley et leurs hôtes apparaissent rapidement. Edith découvre avec surprise que Gregson, son cher éditeur, passe, comme par hasard, ses vacances dans la région et qu'il n'y est peut-être pas venu seulement pour pêcher. Cela créé des tensions entre Matthew et Mary, qui ne sont pas d'accord quant aux motivations de ce monsieur, de surcroît déjà marié. Par ailleurs, Mary, qui est enceinte de quelques mois, doit faire attention à ne pas trop faire monter sa tension sur les ordres de Matthew, inquiet.

Mars 1920. Toute la famille Crawley se prépare à célébrer le mariage de Lady Mary et Matthew. Cependant, Robert apprend une mauvaise nouvelle : la quasi-totalité de la dot de Cora, placée en bourse, a été perdue. Les jours de Downton sont comptés. La famille Crawley est ruinée.

Avril 1920. Lady Mary et Matthew sont de retour de leur lune de miel passée dans le sud de la France. Lors du dîner, Matthew s'entretient avec Robert au sujet de ses problèmes financiers, et lui révèle également qu'il est officiellement l'héritier du père de Lavinia, mais qu'il ne veut pas posséder l'argent de l'héritage. Malgré sa déception, Robert fait mine de comprendre. De son côté, Mary discute avec Violet d'une possible solution pour combler les dettes, et alors que Martha s'éternise à Downton.

Mai 1920. Le grand jour d'Edith est finalement arrivé. Son bonheur ravit ses sœurs, qui seront donc bientôt toutes mariées. Mais Strallan sent l'hostilité de Robert quant à la place qu'occupera Edith à ses côtés dans le futur. Tiraillé de toute part et voulant laisser Edith libre, Strallan la quitte finalement devant l'autel, au grand malheur de tous - exceptée Violet, qui pense que cela est la meilleure décision à prendre. Désemparée, Edith pense qu'elle restera une vieille fille toute sa vie et en veut à ses sœurs d'être heureuses.

Juin 1920. Tout le monde va enfin être au courant du rachat de Downton par Matthew, mais celui-ci va découvrir quelque chose dans les finances qui pourrait ne pas plaire. Anna voit sa vie perturbée lorsque Bates, au cœur d'une machination dans la prison, ne lui écrit plus et elle pense donc qu'il veut la quitter.

Sybil est prête à accoucher, et toute la maison attend avec impatience l'arrivée du bébé. Matthew s'inquiète des répercussions des dégâts de la guerre sur sa possibilité de procréer. Edith est contactée par un journal pour tenir une de leurs rubriques, ce qui révolte toute la famille, étant contre cette idée. Isobel engage Ethel comme aide-cuisinière chez elle, ce qui rebute Mme Bird et Downton qui ne veulent pas d'une prostituée dans leurs services.

Juillet 1920. À la suite de la mort de Sybil, Cora ne veut plus que Robert l'approche, le tenant pour responsable de la décision prise. Violet va alors mettre le Dr Clarkson dans une position délicate afin de les aider dans leur couple. Tom veut que sa fille soit baptisée dans la foi catholique, mais Robert s'oppose à cela. Cependant, Mary, qui ne veut plus le laisser tout diriger à sa façon, prend la défense de Tom.

Août 1920. M. Bates sort enfin de prison, mais cela ne ravit pas Thomas, qui pourrait perdre son rang de premier valet. Il suit également les conseils de Mme O'Brien concernant James, et va lui rendre visite la nuit. Le plan de Mme O'Brien se referme ainsi sur lui car Alfred, passant par là, le voit l'embrasser alors que Jimmy explose de colère.

Le match annuel de cricket à Downton Abbey, avec la participation du village, va avoir lieu. Cette rencontre fait ainsi ressortir le côté compétiteur de Robert car la famille a été battue l'année précédente. Il tente ainsi de s'assurer que les domestiques soient au point pour remporter la partie.