一次意外 将他挡在2004年雅典奥运会门外
在2001年九运会男子举重56公斤级比赛中，张湘祥力挫广西籍举重名将兰世章，以295公斤的总成绩夺得冠军，这也是他最后 一次参加这个级别的比赛。事隔7年，当再次提及这次比赛，张湘祥平静地说：“那一年功夫没有白费，总算如愿以偿，为自己在56公斤这个级别上画上了一个圆满的句号，这个冠军对我来说有着特别的意义。”
2002年，考虑到张湘祥身材偏高，体重偏大等相对56公斤级对他存在诸多不利因素，总局领导经过综合评定，决定让张湘祥改打62公斤级。在改级别后训练初期，对张湘祥来说，可谓是顺风顺水，成绩突飞猛进，最好成绩一度达到当时这个级别世界前三名的水平-总成绩320公斤，这时候，好强的张湘祥把目光瞄准了2004年雅典奥运会。然后凡事并非如他所愿，在接下来的一次训练中，张湘祥因求胜心切，不慎拉伤了腰部肌肉，“那时候因为年轻，再加上本身底子比较薄，不知道在训练中如何去把控一个度，受伤后也不知道该怎样调整自己的心态，就这样反反复复了很多次。”张湘祥曾这样描述当时的自己。
如果说腰伤只是他进军奥运世界举坛所受的一个小挫折的话，2003年一次赛场外的意外给他身体造成的损伤，则是将他彻底抛入了事业的最低谷，几乎让张湘祥的举重生涯就此噶然而止......经历了这次生死攸关的考验后，经过一定时间的休息和调整，湘祥站在了奥运会选拔赛的赛场上，最终因在抓举比赛中三次试举无果，被挡在通向雅典的大门外。面对众多的质疑和猜测，张湘祥选择了沉默。
2008年北京奥运会 他用一枚金牌证明自己
自2004年起，张湘祥开始了近两年的恢复性训练，他付出了常人无法想象的艰辛和努力，没有鲜花和掌声的陪伴，一切从头再来。
经历种种磨练，张湘祥日渐成熟起来。“我从8岁开始练举重，这么多年来，有过辉煌，也遭遇过低潮，举重早已成为我生命的一部分。人不怕摔倒，关键看能不能适时调整自己的心态，放下包袱，轻装前行。从我运动生涯来讲，的确失去了一些参赛机会，但也让我学到很多东西，我出成绩比较早，那时候不懂得去思考一些问题，这几年来，我一直是在补以前的课，开始重新思考生命的意义，四尺举重方台赋予我新的内涵，我热爱它。” 他曾这样表示。
