童年時期的譚延闓自然也渴望與同齡孩子一起玩耍，但在玩耍過程中其他孩子總是有意無意的排擠傷害譚延闓，不知哪個孩子給譚延闓起了外號叫小老三。
雖然譚延闓確實排行老三，叫他小老三也無可厚非，但隨之而來的是一陣哄堂大笑，接下來孩子們將譚延闓圍在中間，邊笑邊叫譚延闓小老三。
年齡在小譚延闓也聽出來孩子們口中的嘲諷，童年譚延闓委屈極了，他不知道自己明明很真誠的和大家做朋友，為什麼大家要一起嘲笑他，孤立他，回去譚延闓便將煩心事告訴母親李氏。
「為什麼他們都叫我小老三，而不是老三」
李氏聽兒子這樣說頓時愣住了，李氏沒有想到自己被欺負也就算了，在無形之中兒子在別人心中也如同自己一般被隨意欺辱。
李氏的心一瞬間揪了起來，像被一雙無形的大手掐住一般喘不過來氣。
這時李氏心裡委屈極了，自己決定不了自己的命運，現在連兒子都要和自己一樣備受欺凌。
想到這的李氏開始感嘆命運的不公，多想自己沒有被譚鍾麟選中，沒有成為通房丫鬟，而是嫁到一家普通的家庭，哪怕貧窮，好歹自己是正妻，自己和兒子不會受別人的欺辱。
儘管李氏流下來了委屈的眼淚，但她還是強忍著淚水對兒子說：「因為我是通房丫鬟是你爹的小老婆，而你是我的兒子所以你就是小老三……」。
譚延闓聽見母親說的話愣住了，這是譚延闓第一次明白身份地位的重要性，第一次明白了母親身為妾室在家中所受的委屈。
童年譚延闓手足無措的為母親李氏擦乾淚水，譚延闓以後便不再和母親說自己被欺負的事情，譚延闓不想看到母親傷心不想看到母親流淚。
隨著譚延闓一天天長大，李氏便知道不能在像之前一樣，李氏便經常與譚延闓講身份地位的重要，教譚延闓如何在這個如同龍潭虎穴一樣的家庭中生存下去。
李氏和譚延闓說：「孩子，你一定要努力，一定要有出息，這樣才能保護自己，才能保護弟弟，才能獲得別人的尊重，不在被欺辱。」
好在譚延闓異常聰明，從小便看清人生冷暖的譚延闓深知自己一定要出人頭地一定要有出息，這樣才能保護自己，保護母親，不再受別人的欺辱。
鋒芒畢露——譚延闓
譚延闓是譚家這代孩子中最聰慧的，從小便展現出超高的智商，這使原本對李氏和譚延闓冷漠的譚鍾麟另眼相待，使譚延闓成為了譚鍾麟最看好的孩子。
譚家家底殷實，譚鍾麟認為譚延闓聰明好學，以後一定會是有大出息的，因此對譚延闓教育方面從不吝嗇，花重金為譚延闓聘請知名老師，教譚延闓知識，同時還要求譚延闓練習書法、吟詩作對。
當時譚鍾麟將譚延闓的課程排的滿滿的，每天除了上課便是練習書法。
譚延闓的其它兄弟姐妹常常在外面玩，譚延闓在屋裡聽著外面的歡聲笑語卻沒有絲毫動搖，始終如一的刻苦學習。
即便李氏是最希望兒子出人頭地有出息的，但看兒子如此努力，用功，李氏還是十分心疼譚延闓。
尤其看到其他孩子在院子裡玩鬧，只有譚延闓一人在屋裡枯燥學習的時候。
一天晚上李氏心疼的將譚延闓摟在懷裡，摸著兒子稚嫩的臉，流下淚水。
譚延闓看到母親李氏因為心疼自己而傷心流淚，抬起肉乎乎的小手將母親臉上的淚水擦乾，和母親說：「娘，我學習不累，我要努力學習，出人頭地，讓娘不在受欺負。」
李氏聽了兒子說的話，感動的一塌糊塗，李氏想到有這樣好的兒子此生哪怕受再多的苦也值得了。
譚府本就是書香門第，學識淵博，譚家的書法更是出名，得到良好教育的譚鍾麟，書法更是遠近聞名。
晚清著名政治家、書法家翁同龢去譚鍾麟家做客看見童年譚延闓在水池中鍛鍊筆力便對譚鍾麟由衷說到：「三令郎偉器也，筆力殆可扛鼎。」
這時的譚延闓才剛滿十歲，但此時譚延闓便在附近小有名氣，人人都知譚家三郎小小年紀學識淵博，書法驚人。
李氏也因兒子的出色表現倍感欣慰，在府中更是時常能聽到旁人對譚延闓的讚美。
譚延闓才剛剛十一歲便萌生了參加科舉考試的念頭，要知道大多數人家十一歲的孩子都是只知道玩鬧的孩童，而譚延闓並不是想想而已，譚延闓開始學習科舉考試相關知識，為科舉考試做準備。