在桓公的呵護下，桓因逐漸成長了起來。桓公教他讀書，認字，教他為人之道，供他上荊州最好的學堂，為他找最好的先生。桓因也沒有讓桓公失望，不但天資聰穎，更是勤奮有加，小小年紀便能說會道，詩書滿腹。而且，桓因從來不因此而感到驕傲，而是與桓公一樣，對人始終客客氣氣，謙卑有加。

桓因的種種表現簡直讓桓公喜出望外，感嘆天不負桓家。桓公也是因此而心情大好，病也逐漸痊癒如初。

一日，桓因在窗前唸書，見書中說到神仙異獸之事，他甚是好奇，便拿著書跑到桓公跟前問到：“爹爹，書上說這世上有仙人，是真的麼？”

“當然是有的，仙人法力高強，能飛天遁地，斬妖除魔，可厲害著呢！”桓公笑呵呵的答到。

“那因兒也想成仙。”

“哦？修仙可是很難很難的。”

“因兒不怕困難。”

“好，來日等爹爹出門行商，去幫我因兒探探仙路，哈哈！”

桓公是一個事業心極重的人，病好了自然不肯賴在家裡，雖然他對桓因牽掛非常，但是家業不可不顧。經商最忌就是疏於走動。桓公養病在家多年，外面的關係若不再走動走動，怕是會給人家搶了去。而且，桓公也希望給桓因接掌桓家做出更好的鋪墊。於是，桓公在桓因四歲時又開始出行跑商。

桓公在家的日子，桓因是幸福的。但是桓公走後，家裡由朱氏掌管，卻不那麼好過。雖然桓公走前千叮嚀萬囑咐一定要好好照顧桓因，但是桓公的離開還是成為了這些所謂的家人對桓因欺辱的機會。

“掃把星”這三個字又被抬了出來，只要桓公一離開，這三個字是始終圍繞在桓因耳邊的。朱、王、劉三位長輩的冷嘲熱諷、惡言相向自不多說，莫名其妙的家法也不少見。哥哥姐姐們更是私下拳腳相加，把桓因當成了生活中發洩的物件。只有一人除外，那便是桓因最小的姐姐桓玖玖。雖然劉氏已經多次告誡玖玖離桓因遠些，但是玖玖還是會私下偷偷跟桓因一起玩。如果他們欺負桓因欺負的狠了，玖玖還是會氣不過幫著桓因說話，這也讓玖玖好幾次都跟著桓因一起受了不小的委屈。

桓因從來沒因為受到欺負而哭過，他只是默默的承受著，然後等他們發洩完了，走了，自己才默默的站起來，自己去府上的藥房找來金瘡藥療傷，然後繼續自己沒做完的功課。

桓因從來沒把這些告訴過桓公，他不想爹爹因此而生氣。他知道爹爹因為生氣得過大病，那是他沒見過面的母親為爹爹治好的病。他常常想，要是自己會仙術，就不會被欺負了吧。

就這樣，又過去了四年。一日玖玖推開桓因的房門，對著正在窗前唸書的桓因說到：“弟弟，爹爹回來了，快隨我去迎接。”此時桓因已經八歲，不僅俊俏帥氣，眉宇間那股英氣更是越發逼人。

“恭迎老爺！”

“恭迎爹爹

！”

桓公笑呵呵的從馬車上下來，大步走到門前，越過眾人，一把抱起桓因，笑到：“因兒，想爹爹沒？”

“爹爹在外打拼，因兒不能幫手，不敢再引爹爹牽掛。”

“真乖，走，回去讓爹爹看看，我因兒又長進了多少。”

雖然這樣的一幕每次都在桓公回來時發生，但是眾人對桓因的嫉妒之情還是無法磨滅。這讓眾人對桓公由最開始的尊敬也慢慢的變得怨恨起來。

一日，桓公召集家人在正廳議事。眾人都到場後，桓公正色說到：“我年事已高，恐怕為桓家奔波不了幾年了。所以今天召集大家來，是想告訴大家，我準備立因兒為我桓家少主，重點培養成我桓家下一代掌舵之人，同時也從今天起輔助大夫人打理家中的大小事務。”

“老爺，因兒尚小，恐怕擔不起此重任。”桓公話還沒說完，朱氏連忙打斷到。

“爹，因弟還是孩子，你居然叫一個孩子管我們？”桓宇跟著急到。

“因兒是孩子？你都二十三了，成天在外給我桓家惹禍，敗壞家門名聲。因兒比你強上太多！”

“老爺，還請三思啊。”除了玖玖默不作聲以外，其他一眾都說到。

“別以為我不知道你們趁我不在時對因兒做了些什麼。你們以為我老了就瞎了嗎？一個個年紀都不小了，整天欺負一個八歲的孩子，傳出去我的臉都不知道往哪放！就這麼定了！誰也不準給我說個不字！”

桓因的這個桓家少主當了一天一夜，第二天，桓家大喪。桓公暴斃於床榻之上，家醫張崇藥的診斷結果是：心疾