非法集资案件到了法院,法院会组织清退,清退阶段会把剩余的全部钱款返还给集资人,钱款不足以返还的各机关不予补偿,由集资人自行承担。债权债务清理清退后,有剩余非法财物的,予以没收,就地上缴中央金库。服刑后如果之前的钱还欠着自然要还。