20世紀初頭、ヨークシャーの大邸宅「ダウントン・アビー」には、当主グランサム伯爵ロバートとその妻コーラ、長女メアリーとその息子、亡き三女シビルの夫トム・ブランソンと娘が暮らしている。先代伯爵夫人バイオレットらもたびたび訪れるなか、ジョージ5世国王とメアリー王妃が来訪することになり、一家も使用人たちも興奮の極みに達する。今やダウントンを切り盛りする長女メアリーは、引退していた元執事カーソンに助けを求める。だが、先乗りした従者たちは、夫妻の世話も食事も給仕もすべて自分たちが行うと告げ、カーソンや家政婦長ヒューズや料理長パットモアら使用人たちを憤慨させる。