乔致庸活了89岁，一生娶有6妻，因乔门中有不许纳妾的家规，都是续弦，育有六个儿子、十一个孙子，其中三儿子乔景俨在乔致庸晚年时当家。乔致庸也曾想在儿子中寻找继承人，却无一理想人选。他对儿子也进行了认真的分析：长子不可委以重任，因为他骄横跋扈；次子个性暴烈；三子过于老实，不是经济之才；四子朴实迟钝，不善于说话；五子是个书呆子；六子体质瘦弱，难当大任。最后，只能把家业交给了长孙乔映霞。

但在清末那个银行兴起、票号式微的时代，没有留洋背景，没有官僚资本，乔致庸的商业帝国免不了会走向衰落。清末清政府设户部银行始，乔氏票号业务多被官办银行夺走，公私存款大幅度减少，乔氏不得不把票号改组为钱庄。辛亥革命时期，随着清王朝的灭亡，原依附清王朝的乔氏商业，大受损失。

以乔氏在包头的复字号商业为例，1926年冯玉祥军向北撤退，饷粮皆由包头商号垫支，摊派极重，乔氏复字号因此损失粮食五万石，现洋150万元，元气大伤。1937年日军侵占包头，乔氏复字号当铺、钱铺均被日伪组织接收。抗战后，乔氏商号复业，仅苟延残喘，到解放前已是奄奄一息。

乔家后人怎么样了呢?1938年9月，因不堪日军骚扰，乔家合家老小六十余人纷纷离去，避难于平、津等处，从此就再没有回来。

现在乔家后人大多是公职人员，属于工薪阶层，普通而平凡，大多数人都在北京，因为人太多，工作也忙，在商议家族事务时，只好各家派一个代表参加。每隔几年，家族成员会一起去大院儿聚会，也是对前辈的一种怀念。