一八八四年，清庭在新疆建省，以乌鲁木齐为省会，并统一了各州、县的地名，任命刘锦棠为第一任新疆巡抚；从此，原来的伯克制度被废除，新疆被置于清庭的直接管辖下了。
胡光墉因帮左宗棠筹饷，助西征军收复新疆有功；赏授江西候补道，并赐黄马褂。胡光墉十分得意，遂成了显赫一时的官商。
于是，胡光墉放手办厂经商了；他在各地开了许多钱庄，以筹措所需资金；而在杭州还开办了一家胡庆馀堂雪记药号，更是造福一方饮誉海内。
尔后，胡光墉在上海开办蚕丝厂，并花了二千万两白银的巨资高价尽收国内的新丝数百万担，欲垄断丝业贸易。
胡光墉的这一举动惹恼了外商，因当时的海关与海运均操纵在外商手中；于是，外商就联合起来对付胡光墉，致使他的蚕丝不能外销。
胡光墉没有防到外商会对他采取这么厉害的一着，令他招架不住了。
因为，胡光墉用于购买蚕丝的巨款皆来源于各地的钱庄；蚕丝未能出销，各地钱庄也就银根吃紧周转不得了；迫使胡雪岩只得将高价购进的蚕丝贱卖掉，结果亏损了高达一千万两白银。如此巨损，顿使胡光墉一败涂地；他赶紧变卖家产，想补上这个天大的窟窿，但仍无济于事。
消息传出风声鹤唳，各地钱庄的客户纷纷挤兑；各地钱庄如何抵得住挤兑风潮，一下子全都倒闭了，许多客户也就跟着受损。而钱庄的客户大多是当地的士绅与官僚，岂愿就此罢休；于是，将胡光墉告到了朝庭。且又因胡光墉与左宗棠交好，并助左宗棠成功收复了新疆；遂被与左宗棠间隙甚深的李鸿章视作眼中钉，常思“倒左须先倒胡”而必欲除之；所以，李鸿章趁机也在慈禧太后面前谗言几句，胡光墉更是必定要倒霉了。
慈禧太后见群臣将其弹劾，于是下《旨》将胡光墉革职查抄严加治罪。光绪十一年，胡光墉在凄凉中度过晚年后黯然离世。
胡光墉勤奋创业曾荣耀一时，并以其雄厚的财力为国、为民办了善事；跻身官、商两界游刃有余世所罕见，亦可谓是个传奇人物。然而，他那双能不失时机地捕捉商机的慧眼却不识宦海中的风险；因一着失误而全盘皆输了，最终落了个凄惨的下场，却也是始料不及。
尚可庆幸的是，胡光墉创办的位于杭州吴山北麓的胡庆馀堂雪记药号终于留存了下来，仍为一方百姓祛病济世，才为后人所瞻记。此皆为题外话，略叙。
