老夫人生了三个孩子都因意外而失去，对她怀孕的事总是提心吊胆，紧张兮兮，担心妻妾之间的争宠会害了她和她腹中的孩子，所以几次对凌芮希提起，要他带花芋离开王府，好好地生下孩子。
花芋一开始不希望因为她的因素而毁坏凌芮希和香灵夫人的母子关系，但有一回香灵夫人掉了根凤钗，竟会在她的枕头下找到，香灵夫人大发雷霆，依然趁凌芮希不在府里时把她又赶出府一次，这一次彻底激怒了凌芮希，他决定带她离开兰王府，而她也不再拒绝。
离开兰王府后，凌芮希本想另外置屋，但花芋却想在孩子生下来以前完成画一画大山大水的心愿，他于是便决定陪著她四处游历作画。
但是孩子出生以后，他们还是得回到兰王府。