父亲：裴行俭，官至礼部尚书，兼检校右卫大将军，封闻喜县公，累赠至太尉。

母亲：厍狄氏，曾拜御正（女官名），封华阳夫人，后进封晋国夫人。

妻子：武氏，武三思之女，曾与李林甫有私情。

儿子：裴稹，历任起居郎、祠部员外郎。