后见吴名声渐重，于是焚毁笔砚，后专攻雕塑，当时有"道子画，惠之塑，夺得僧繇神笔路"之说。他在南北各地寺院，雕塑过许多塑像。他塑的倡优人留杯亭彩塑像，陈列于市中，人们从背面就能认出，可见雕塑技艺的高超。《五代名画补遗》:"杨惠之不知何处人，与吴道子同师张僧繇笔迹，号为画友，巧艺并著。而道子声光独显，惠之遂都焚笔砚毅然发奋，专肆塑作，能夺僧繇画相，乃与道子争衡。时人语曰道子画，惠之塑，夺得僧繇神笔路。……且惠之塑抑合相术，故为古今绝技。惠之曾于京兆府塑倡优人留杯亭像，像成之日，惠之亦手装染之，遂于市会中面墙而置之，京兆人视其背，皆曰此留杯亭也"。惠之还著有《塑决》一书，惜已不存。被人们尊称为"塑圣"。
杨惠之尤其擅塑罗汉像，首创将人物安排在山石背景中的样式-壁塑(亦称"影塑")。杨惠之在肖像雕塑上造诣很深，相传他曾为长安著名艺人留杯亭塑像，人们从像的后面就能认出是留杯亭。杨惠之还总结多年雕塑经验，写成《塑诀》一书,可惜自宋代后就失传了。
