被稱為政治強人的前總統李登輝，鐵漢柔情的一面，只有結褵超過一甲子的牽手曾文惠最清楚，「如果有一天我要走了，我一定要在走之前，緊握妳的手，謝謝妳一輩子的照顧，我會好好的走，因為在妳的扶持和陪伴下，我已經非常滿足，沒有遺憾」，李登輝曾經用這段話，說出他對夫人曾文惠女士的愛。
曾文惠生於1926年3月31日，日本名字叫文子，乳名壽米可，從小就與李登輝與相識，曾文惠的祖父是三芝鄉鄉長，李登輝的祖父是保正，曾文惠的父親曾慶余和李金龍是小學同班同學，又是農會的同事，曾文惠生下來時，李登輝的祖父幫她算命，說會好命，「將來就嫁到我家好了」。
曾文惠的娘家是三芝鄉頗具聲望的大戶，她的姐姐和妹妹都嫁給醫生，她則選擇了喜歡讀書的李登輝，1949年2月9日，23歲的曾文惠與當時26歲台大農經系助教的李登輝結婚，婚後育有一男二女，獨子李憲文曾在一篇散文中提到，「母親之所以嫁給這個佃農之子，是看他愛讀書，常流鼻涕、很可愛」。十幾年後曾文惠回憶說，當年父母也是介紹幾個醫學院的男孩子給她，但她都不中意，「這大概就是緣份吧」！
大陸作家曹長青也曾在他的專訪中提到，「別以為學農學的人很呆板，李登輝和女朋友的約會比許多學文學的人都浪漫」。他透露，每次見面，李登輝都會送給曾文惠一本日本岩波文庫的書，如他自己最喜歡的哥德作品《少年維特的煩惱》、《浮士德》等。然後下次見面兩個人就要交流讀後感。「我不禁感嘆，他（李登輝）可真高明呵，這種對女孩子指教的過程，大概是男士最能展示自己博學智慧、最能贏得女孩子心的辦法」。
不過，受日本教育的李登輝，有時也難免流露出大男人的性格，像李登輝在康乃爾大學讀博士的時候，閒在家裡的曾文惠覺得她可以利用這個機會在美國學會開車，但李登輝卻不允許她學，理由是「你出門後到回家以前我會很擔心的」，於是聽話的曾文惠放棄了學開車，而改學安全的高爾夫球了。
而眼尖的媒體也發現，當夫妻同時在公開場合現身的時候，曾文惠總是安靜、亦步亦趨的跟在李登輝後頭，小女人的柔順性格表露無疑，但正如許多先生在遇到困境時，都會諮詢自己的妻子，李登輝也同樣，他曾經說，「我認為我太太是最標準的老百姓，當我不知道一般老百姓怎麼想，而難以判斷時，我都會參考她的意見」。
在李登輝放棄了學者生涯而步入政壇後，曾文惠一直謹小慎微的護佐著丈夫，也被稱為「最無聲的第一夫人」；在李登輝卸下總統之責時，她終於鬆了一口氣說，「我終於找回了自己的丈夫」。但卸下總統擔子的李登輝，卻一直沒能如曾文惠的願，作為虔誠基督徒的曾文惠，期盼著李登輝能按照他自己所期望的，去給偏遠地區的原住民傳教；她要的不是丈夫做總統的榮耀，而是到深山裡傳教的快樂。
兩人婚後育有一子二女，獨子李憲文早逝，而媒體曾形容，「大女兒李安娜神秘，像月；小女兒李安妮活潑，如日」，或許因為排行老二的關係，李安娜向來低調，既不似哥哥那般受重視、也不像妹妹一樣受寵愛，兩姐妹個性截然不同，前者穩重、後者衝動。
曾文惠到康乃爾陪李登輝攻讀博士，曾在寫給女性友人的信中，不斷誇讚李安娜，會幫她注意關燈、關門、檢查瓦斯和打理家務，令她十分放心；至於李安妮，從開車看個性。前國民黨副主席林澄枝就曾透露，「我們坐她的車，心臟都快跳出來」！
李安娜與李安妮讀大學時，就與黃循武、賴國洲交往，在哥哥李憲文過世前2年，陸續完成終身大事。李安娜的夫婿黃循武，是馬來西亞僑生，父親經商，在馬國擁有廣大的土地和財力。李登輝曾開玩笑說，李安娜是「外籍新娘」；還曾當著馬來西亞首相馬哈迪的面，抱怨馬來西亞沒有人權，李安娜嫁到馬國30多年，卻拿不到國籍！
李安娜的妹妹李安妮，同樣出身於學界，是李登輝3名子女中，唯一喝過洋墨水的。李安妮的夫婿賴國洲曾任台視董事長兼總經理等十多個職務。有人認為，李登輝在新聞文化界的人脈都由賴國洲出面聯絡，其影響力甚至超過當時任台灣省長的宋楚瑜。
儘管在政治上霸氣十足，李登輝對妻子、女兒、媳婦、孫女是疼愛有加，李安妮與李安娜，曾在父親的生日宴上，一股腦傾吐對他的情感，令李登輝紅了眼眶，家庭的溫暖也是支持李登輝最堅強的後盾，和守護的力量。