賀軍翔不認愛的灑脫曾讓林依晨非常難堪。此後兩人鬧翻、硬是拍了先前談好的廣告後就再也沒同過台,直到今年安以軒的婚禮時才合照破冰。
對此賀軍翔也曾說:「我的緋聞不多,另一方面,可能我要求太高。跟我合作的人跟誰有緋聞,我就不想跟她怎麼樣。這就是我大男人的地方。」再早之前,他則跟鄭元暢傳過極具爆炸性的男男緋聞。
2007年,流出鄭元暢的私密日記內容,關於賀軍翔的文句節錄如下:「今天時(晚)上又忍不住跟小美(賀軍翔)通上電話,我真賤,氣死我了,但我還是又要裝沒事,媽的我還用他一貫招牌式の關心或關懷,我就心軟了。我真沒用,可能我內心深處還是渴望需要留下一個屬於他の位置吧。」
雖然後來賀軍翔跟阮經天、陸明君紛紛跳出來替鄭元暢撇清,說他不是男同志,後來事情就此不了了之;直到今年賀軍翔結婚才又被重新回顧了一次。