1916 年，索姆河战役，Matthew 得到指令，其所在军团获得几天假期，于是他带着未婚妻 Lavinia 回到唐顿庄园见见他的家人。Mary 也回到了唐顿，当她得知 Matthew 已经订婚时，强忍悲伤。两人在庄园举办的战争筹款音乐会上相见，决定摒弃前嫌，还做朋友，并互致祝福。Matthew 假期结束，Mary 早起相送，并将自己从小到大带着的幸运符送给 Matthew，告诉他要平安归来。Sybil 听取 Matthew 的妈妈 Isobel 的建议，向仆人学习做饭、沏茶，并拜托 Isobel 安排她进护士培训学校，决心为战事出一份力。司机 Branson 送 Sybil 去培训学校，并想她告白。Edith 向司机 Branson 学习开车。 Bates 的母亲去世，留了一笔遗产给他。Bates 原以为得到这笔遗产，他就可以以此为交换向前妻提出离婚，于是他返回唐顿向 Anna 求婚。但是前妻 Vera 找上门，用土耳其人死于 Mary 房中之事逼 Bates 跟她离开唐顿。Bates 无奈请辞，老爷非常生气，Anna 悲伤万分。Thomas 在战争中吃尽苦头，为回到战争后方，他引敌军开枪，自毁左手。庄园还来了两位新仆人，女仆 Ethel 顶替上一季去做秘书的 Gwen，老爷的贴身男仆 Lang。Ethel 一心想着飞上枝头变凤凰，而 Lang 是有战后创伤后遗症的退伍军人。

Mary 在伦敦认识的 Richard 爵士到唐顿做客，Rosamund 姑妈也一起到访。Richard 在伦敦有报馆，有钱有势。Mary 觉得 Richard 尚算门当户对，但祖母 Violet 对他很不满意。Richard 与 Matthew 的未婚妻 Lavinia 似乎早就认识。Richard 离开唐顿之时向 Mary 求婚，Mary 没有当即答应。Edith 到 Drake 家帮忙开拖拉机，在农事的劳作中得到快乐。但她与 Drake 先生情不自禁接吻，被 Drake 太太看到，Edith 被辞退。Sybil 到唐顿医疗所帮忙。William 被征入伍，能被 Carson 使唤的男仆一个不剩。为了办好 Richard 爵士的晚宴，Carson 让 Lang 充当男仆，服侍晚宴，但 Lang 越帮越忙，害得 Carson 心脏病发。Mary 探望 Carson，Carson 劝她重拾自信，向 Matthew 告白。O’Brien 劝说太太将 Thomas 调到唐顿医疗所，太太不知道 Thomas 曾经的偷窃行为，一口应允。Thomas 如愿回到唐顿。Patmore 太太的外甥在战场上死去，她劝 Daisy 满足 William 所有要求，以防以后后悔。Daisy 尽管并不确定自己是不是喜欢 William，但为了让他充满信心地上战场，一直没有明确拒绝。

唐顿医疗所的空间有限，Isobel 建议把唐顿庄园改造为病患恢复站，Sybil 甚为同意。但治愈的病患入住唐顿庄园，给 Crawley 一家带来不便。尽管如此，三个女儿也渐渐融入到照顾病患的工作中去。Isobel 和太太 Cora 为谁来管理安排仆人和医护工作有不小分歧。祖母和姑妈忙着对 Lavinia 追问她与 Richard 爵士的关系，Mary 得知之后，向 Lavinia 和盘托出。Lavinia 也向 Mary 解释了自己和 Richard 的关系，Mary 表示同情和理解。Matthew 在中部地区的作战任务结束，陪上将巡查北部各个军营，并巡查到唐顿庄园。上将对伯爵一家为战事所做的贡献表示赞赏。在 Mary 的帮助下，Anna 找到 Bates。Bates 在离唐顿不远一家酒馆做酒保，他已经有了与前妻离婚的办法，让 Anna 静候。Branson 作为爱尔兰人，对军队在爱尔兰的不作为表示愤慨。上将巡查至唐顿庄园时，他自告奋勇充当男仆，服侍晚宴，实则想图谋不轨，幸被及时制止。Lang的病情越发严重，Carson 不得已将他辞退。

老爷向 Mary 询问是否要嫁给 Richard 爵士，Mary 觉得父母也不是因为爱而结婚，但最后还是幸福，或许自己也能做到。于是去信给 Matthew 告诉他自己的决定。Matthew 看信后与 William 去巡查，不幸遇敌军，被困失踪。Isobel 在唐顿庄园无法施展能力，决意离开，前往法国。她离开后，厨娘 Bird 太太在家中给流浪战士施饭，后来 Patmore 太太和 Daisy 也加入。O’Brien 原以为能在太太面前告她们一状，但太太见此情景也欣然加入。Branson 向 Sybil 提出私奔，Sybil 不知如何回应，恰好被 Mary 撞见。老爷得知 Bates 下落，亲自将其寻回。Bates 又回到唐顿庄园。在庄园为战士们举行的音乐会上，Matthewm 和 William 出现，正在表演唱歌的 Mary 激动忘词，最后两人一同完成演出。Ethel 一直与一名入住的少校 Bryant 暧昧不清，他俩的奸情被女管家 Hughes 太太撞破，Hughes 太太将 Ethel 辞退，但 Ethel 后来又返回告诉 Hughes 太太自己已经怀孕。

Matthew 在战争中负伤，处于昏迷，被安排到唐顿医疗所养伤，Mary 积极地照顾他。但 Matthew 下半生可能无法行走，也将失去生育能力。Lavinia 来了，Matthew 希望她离开自己，去过幸福的生活。Willam 不具备在唐顿医疗所养伤的资格，但老太太积极周旋，终于把William 带回唐顿，但 William 受到爆炸的冲击力，伤及肺部，可能无法治愈。Bates 前妻 Vera 又回到唐顿，再次威胁 Bates 要爆出 Mary 的丑闻。Mary 为防止 Vera 将丑闻卖给报社，赶赴伦敦向 Richard 爵士说明。Richard 知道后，愿意帮助 Mary。Mary 的丑闻当然没有登报，但取而代之的是 Mary 和 Richard 的订婚信息。Ethel 生下孩子，Hughes 太太一直在暗中帮助她抚养孩子，但孩子的父亲不愿意见她们母子。William 知道自己命不久矣，希望 Daisy 跟他结婚，那么自己死后，Daisy 还能获得一笔抚恤金。Daisy 不想再骗 William，但所有人都希望 Daisy 完成 William 的心愿。他们在唐顿庄园，William 的病榻前，在众人的祝福里结婚了。不久，William 病逝。唐顿庄园有一位女仆前来应聘，名叫 Jane，是战死战士的遗孀。

1919 年，唐顿庄园送走了最后一批医疗设备，恢复了旧日的庄严和平静。Richard 为了让 Mary 回心转意，将 Lavinia 带回唐顿庄园。Grantham 伯爵不满 Cora 对 Matthew 如此绝情，更不明白庄园的未来在什么地方，他忘情地吻了女仆 Jane。Richard 要求 Anna 到哈克斯比庄园工作，并要求她监视 Mary，向他汇报。Anna 拒绝了他，并向 Carson 等人报告。Carson 拒绝到哈克斯比庄园工作。Matthew 能站起来了，一家人欣喜万分，而事实是 Matthew 不仅能站起来，而且还能正常生活。一家人高兴地吃饭，Matthew 高兴地宣布将在唐顿与 Lavinia 结婚，Mary 难掩神伤，祖母敏锐地察觉到了。祖母把 Mary 还爱 Matthew 的事告诉了 Matthew，Matthew 表示 Lavinia 曾在他最困难的时候扶持他，他不能背弃她。但祖母认为婚姻是漫长的，应该选一个对的人。Sybil 怀念劳动时的快乐充实，就在众人庆贺 Matthew 站立之际，Sybil 和 Branson 离开唐顿，Mary 等将其寻回。Thomas 开始做起了投机倒把的生意，但被坑了。Ethel 的情夫的父母到唐顿，Hughes 太太本想帮她安排与他们见面，但时机不凑巧。Ethel 不顾 Hughes 太太阻拦，冲进餐厅，但丧子之痛让少校的父母无法面对，也不愿承认。

Matthew 终于可以拄着拐杖行走了，他和 Lavinia 的婚礼也在积极筹备当中。Branson 向伯爵一家宣布 Sybil 和他的事，伯爵大怒。Matthew 和 Mary 共舞一曲，两人互诉衷情，热吻之际，正巧 Lavinia 撞见。伯爵和 Jane 藕断丝连。家人接二连三的身体不适，流感症状不断。Lavinia 也不幸感染，婚礼不得不延期。Lavinia 告诉 Matthew 不应该娶自己。而 Cora 的病情最为严重，似乎性命不保，O’Brien 为多年前曾害她流产深深谴责和忏悔。而与此同时，Lavinia 的病情突然恶化，临终，她告诉 Matthew 要幸福。Matthew 深深自责，认为是那个吻害死了 Lavinia。伯爵最终在 Sybil 的事情上让步。Thomas 想回到唐顿庄园继续当男仆，但被 Carson 一口回绝。Anna 受 Sybil 的行为的鼓舞，决定和 Bates 结婚，共同面对官司。少校 Bryant 的父母想见 Ethel，谈孙子的事。他们要求 Ethel 不再见孩子，也承诺孩子会得到良好的教育和照顾。Ethel 最终决定独立抚养孩子。Bates 和 Anna 登记注册结婚，并幸福结合。Jane 离开了唐顿庄园，Lavinia 的葬礼如期举行。人们来来去去，庄园却依然如故。你迎来了谁，你又送走了谁，你要将我们带去哪里？