黄明远从长孙家出来，便直奔高家而去。
相较于曾经显赫尊荣的长孙家，高俭高士廉的家就破落了许多。虽然是北齐皇族，但高士廉的父亲高劢在大隋只是一个州刺史，高士廉本人也只是担任从九品下的治礼郎，官职卑微，地位低鄙。
不过高士廉年轻时很有器量，对文史典籍也有所涉猎，与司隶大夫薛道衡、起居舍人崔祖浚是忘年之交，因此得到公卿的赞许。他自以为是北齐宗室，不宜广交名流，于是隐居在终南山，闭门谢客，直到大业中方入仕，因此名声斐然。
黄明远到了高府，高士廉赶紧将黄明远迎入府中。黄明远这个身份的人前来拜访，不说使其家蓬荜生辉，也是脸上生光的事情。
“下官高俭见过卫公。”
“士廉不必多礼，今日我来，以私人身份拜访令妹高夫人，无须多礼。”
高士廉此时困厄，倒是值得自己拉一把。虽然未来在唐朝高士廉能够官居宰相多占了外甥、外甥女的光，但其人才能，可为一郡州长或者是一部之首，算是一个能臣。
不过高士廉身份特殊，黄明远倒是不愿过于直白，省得惹了麻烦。
很快长孙晟的继室高士廉的妹妹高夫人带着儿子长孙无忌和女儿长孙观音婢出来了。
黄明远上前行了一礼，说道：“见过嫂夫人。”
高夫人也是大家闺秀，因此还了一礼，又让儿女给黄明远行礼。
双方各自坐定，黄明远便说道：“我随天子出征吐谷浑，方才回京，便听到季晟兄之不幸。季晟兄于我如师如友，今猝然离世，实在令人万分惊愕，悲痛欲绝。”
黄明远说到这，也是唏嘘不已，而高氏更是眼圈微红，潸然欲下。
黄明远接着说道：“嫂夫人，我刚从长孙家出来，不知这个当口，嫂夫人如何带着孩子们从长孙家出来？”
听到这，高氏更是忍不住了，眼泪也流了下来。她一边用帕子擦着泪水，一边说道：“不瞒黄家叔叔，这长孙家实无我母子三人的立足之地啊，我若不搬出来······”说着，高氏已经是泣不成声。
黄明远赶紧规劝道：“嫂夫人莫哭，我虽是外人，不便插手长孙家的家世，但总归是儿女亲家，自不会让嫂夫人母子让人欺负了。”
高士廉也赶紧上前规劝妹妹，高氏这才止住了哭泣，絮絮叨叨地与黄明远说起了前因后果。
原来长孙晟身前，曾经与高氏说过，家中诸子，能继承其家业者，唯长子恒布也，然恒布早逝，诸子庸碌，后继无人。及幼子长孙无忌渐长，聪明鉴悟，应对敏速，雅有才略。长孙晟常言能传其业者，终幼子无忌也。
不过说归说，终归嫡庶有别，长孙晟也没有名正言顺的把继承人改为长孙无忌。是故这事直到长孙晟死，也只是说说而已。
长孙晟去世之后，年长的长孙安世等人继承家业，长孙无忌只有十二三岁，更兼家主后母所生之子，身份尴尬，高氏便想替儿子夺回丈夫许下的家业。否则家主困顿，母族无力，儿子无忌岂不是要一生蹉跎。
终究是高氏年轻，一番相争之下，高氏没有争过获得长孙炽等人支持的长孙安世兄弟，最终落败。
双方为了家产、勋位，争的不可开交，甚至撕破了脸，长孙安世更是口出狂言“有他在高氏别想好过”。落败之后，高氏思前想后，若是继续待在长孙家，他们母子根本无自保的能力，因此高氏便选择逃出长孙家住在了娘家。