謝祖武的老婆江婷琳當年在傳播公司負責廣告業務，兩人透過朋友介紹相戀，2002年決定共組家庭。不過當時謝祖武婚結得低調，甚至被歸類為「隱婚」一族。
後來就算已經結婚生子，但謝祖武竟把事業重心放在中國，撈起了人民幣來，包括《唐宮燕》及《紅轎子》《大當家》等；直到去年開始，他才開始重回台灣開節目、接演台劇。
當時，原本對於家庭生活相當低調的謝祖武，也漸漸對外分享夫妻之間的相處之道，比如被問到是不是怕老婆？他打趣：「我是真心怕！不是尊重。」但也強調自己努力工作並且時常稱讚老婆，回到家還會跟兒子看電影、討論電動，講起來感覺一副新好先生及新好爸爸的愛家形象。
外界經常傳言謝祖武已跟老婆江婷琳離婚，甚至還被當成趣事講，有回杜詩梅遇到江婷琳，沒想到江婷琳開場白就是：「怎麼樣，我維持這麼多年還是元配，不簡單吧？」雖然聽來像是玩笑，但話中透露擔任謝祖武的「元配」是件「不簡單」的事。
之前有人問謝祖武說老婆會不會擔心他搞外遇？當時他回：「所以我都選擇工作量大的戲啊，沒那餘力也沒那時間。」看來如今的謝祖武既有餘力也有時間，竟跟女製作人吳育婷爆出婚外曖昧情。
