现在李靖和红拂女两人在长安城终于有了一个安定的家。家安定下来了，此时红拂女的心事也来了。
第二天晚上刚吃过晚饭，红拂女突然一边抹泪一边对李靖说道：“靖哥哥，现在我们也算是安定下来了，我现在特别想两个孩子了。我们是不是应该早点想办法把两个孩子接过来？现在外面兵荒马乱的，把两个孩子独自放在外边我这心中着实放心不下。”
“嗯，我也有这样的想法，正想跟你商量这事呢。”
李靖听了点点头，他安慰红拂女道：“不过夫人也不用担心，李伯做事一向忠诚可靠。现在我们既然已经安顿下来了，也确实应该把孩子接回来了。明天我先跟二公子说明情况，再取道山西把两个孩子找回来。”
“那要不要我和你一起去，这样也好有个照应？”
“不用，我一个人去反而能快去快回。我们的家刚刚安定下来，你在家里面稍微打理一下，和张伯他们熟悉一下情况。以后我不在家的时候肯定更多，外面什么事情都要靠张伯照应着。”
“那也好。只是现在外面兵荒马乱的，你自己也一定要小心一点。”
红拂女听了李靖的话后点了点头。
原来李靖和红拂女当初为了方便从马邑郡跑出来，又怕李渊报复，用两个孩子来要挟他们。所以在他们在临走之时便将两个孩子，当时仅三岁的李德謇和不到二岁的李德奖交给管家李伯，让他带着两个孩子潜藏到民间。这段时间两人确实也顾不上孩子，如今安顿下来后，红拂女思子心切，才着急催着李靖去把孩子接回来。
第二天，李靖依虬髯客之言将宝驴儿放归南山，自己则告别红拂女，到潼关报到。
“李兄，和你在一起的那位张大哥怎么没有来？”
李世民见李靖早早归来，非常高兴。但看到只是李靖一个人前来，颇有些失望，便追问起虬髯客的情况。
“二公子，在下将公子有心邀他出山的意思对张大哥说了。可他说自己是江湖中人，一个山野村夫，不太适合为朝廷做事。张大哥再三致意让在下转达对公子的谢意。”
“噢，是这样。”
李世民听了心情很有些失落。但他还有一点不死心，对李靖说道：“李兄，你告诉我他家住哪里，我打算亲自去请，以表达我邀他出山的诚挚之情。”
“二公子如此器重张大哥，在下替张大哥谢谢公子。不过……”
“不过什么？难道这位张兄……”
“不是不是，二公子误会了！”
李靖连忙摆手笑道：“二公子，现在已经赶不上了。张大哥已举家迁走，并说今后不再踏足中原。”
“什么？举家迁走了？永不蹋足中原？”
李世民听了惊愕不已，认为虬髯客真是异人，来去洒脱，行为举止乖张，竟如不食人间烟火一般。
“是的！”
李靖见李世民惊讶的神情，知道他一时想不通虬髯客为什么这么做。但他也不便于把昨天虬髯客对他说的讲给李世民听。