通常来讲，短婚离婚时三金是否退还得依据具体情形而定。
倘若三金是男方在婚前怀着结婚的意愿赠予女方的类似彩礼的财物，并且双方压根就没去办理结婚登记手续，又或者虽办理了结婚登记手续，可实际上并未共同生活过，这种情况下，离婚时男方是有权利让女方返还三金的。
然而，要是三金已经转变成了夫妻共同财产，就像婚后双方一起使用、消费了，那么在离婚的时候就不能要求女方全部都退还给男方。
另外，如果三金是女方在婚后用她自己的个人财产购买的，那在离婚时男方是没有权利要求女方退还的。
总之，一定要根据实际发生的事实以及所掌握的证据，来确切地判断三金到底该不该退还，以及退还的比例等相关问题。