裴行俭一生中有两位妻子，四个儿子，还有两个女儿。但是，他的大儿子早逝，其他儿子分别是裴延休、裴庆远、裴光庭。裴光庭后来做了唐朝的宰相，光宗耀祖。其实，裴行俭小的时候也是比较惨的，因为他出生时虽然正是战乱时期，最亲近的家人几乎都死了，于是他跟着母亲生活。但是，他这个人能力很强，因此后来进了朝廷当官了。