2015年成為世界甜點冠軍師傅之後，楊嘉明在業界名聲更加響亮，隔年便有金主投資，在信義路舊美國在台協會旁開了一間美輪美奐的法式蛋糕麵包店。「那時候我出了幾百萬元，其他股東集資共3,000萬元，80坪的店超級漂亮，光大大小小烘焙機器就花掉1,000多萬元。」生意卻始終做不起來。
「對我來說做蛋糕很簡單，做生意真的太難！每次跟股東開會，我前幾天壓力都大到無法睡覺，真的快得憂鬱症。」開會的時候，股東什麼難聽話都可能脫口而出，「他們會說：你是什麼冠軍嘛！為什麼吳寶春可以做到，你不行…」楊嘉明覺得自己不懂行銷，也沒有團隊幫忙，「金主們也都不是相關行業，我其實提出很多建議，但他們也沒怎麼聽。後來就有點覺得好啊，反正要燒（錢）大家一起燒。」楊嘉明覺得現在烘焙競爭太激烈，沒有網路行銷，想要做大，幾乎不可能。
最低潮的時候，楊嘉明所有積蓄已經為店花完，他只能跑到中國賺錢貼補。他在業界當然還是有知名度，受邀到中國擔任烘焙業顧問，教他們怎麼開發產品。「我一個月可能跑2、3次，一次去就大概20萬，一個月可以賺4、50萬。」楊嘉明說他最夯的時候，是廣州、上海、北京、武漢最遠到雲南，到處跑。
2019年股東決定撤資，楊嘉明跌入谷底，他後來用在中國賺的錢及跟親友借，花700萬買回公司，想要全力再拚一次，沒想到，馬上就遇到肺炎疫情。
「我年輕的時候，看很多師傅開店遇到SARS，虧很多，倒閉的也有，就會很怕自己開店時也遇到。比起來，我很晚才開店，心想不可能這麼倒楣，結果⋯遇到更猛的。」