诈骗罪案件中未退回罚金的缘由一般有许多种可能性。
例如，被告人自身财务状况拮据，目前尚无力承担此项罚款；
亦或是被告人试图规避缴纳罚款等情况。
针对前者，可能须要在确认被告人经济条件好转后方可对其执行；
若涉及到后者行为，执法机构将采取适当措施予以强制收缴。

《中华人民共和国刑法》第五十三条
【罚金的缴纳、减免】罚金在判决指定的期限内一次或者分期缴纳。期满不缴纳的，强制缴纳。对于不能全部缴纳罚金的，人民法院在任何时候发现被执行人有可以执行的财产，应当随时追缴。
由于遭遇不能抗拒的灾祸等原因缴纳确实有困难的，经人民法院裁定，可以延期缴纳、酌情减少或者免除。