不退赃的话，处罚更严重。被法院判决非法吸收公众存款罪，扰乱金融秩序的，处三年以下有期徒刑或者拘役，对个人并处或者单处二万元以上二十万元以下罚金；数额巨大或者有其他严重情节的，对个人处三年以上十年以下有期徒刑，并处五万元以上五十万元以下罚金。只适用附加刑－罚金，并不适用附加刑－没收财产，所以不会没收犯罪分子个人所有财产的一部或者全部，扰乱金融秩序的，对个人并处或者单处二万元以上二十万元以下罚金；数额巨大或者有其他严重情节的，并处五万元以上五十万元以下罚金。
由于查封、扣押、冻结的主体不同，人民法院判决后在案财物的处理程序也不相同。
人民法院受理案件时，对于侦查机关冻结在金融机构的存款、汇款、 债券、股票、基金份额等赃款赃物，应当审查是否附有金融机构出具的证明文 件原件。人民法院作出生效判决后，通知该金融机构上缴国库，伺时将判决书 送达有关财政机关。金融机构应当在接到执行通知书后十五日内向人民法院送 交执行回单。
对于查封、扣押、冻结的赃款赃物依法不移送的，人民法院作出的判 决生效后，由原审的人民法院通知查封、扣押、冻结机关上缴国库，同时将通 知及判决书送达有关财政机关。查封、扣押、冻结机关应当在接到执行通知书 后十五日内向人民法院送交执行回单。
对于人民法院查封、扣押、冻结的赃款赃物及其孳息·人民法院作出的判决生效后，由原审人民法院依照生效的法律文书进行处理。除依法返还被 害人的以外，应当一律没收，上缴国库。法律另有规定的除外。
（一）客体是国家金融管理制度；
（二）客观方面表现为行为人实施了非法吸收公众存款或变相吸收公众存款的行为；
（三）主体是达到刑事责任年龄且具有刑事责任能力的自然人；
（四）主观方面表现为故意。
根据《刑法》第一百七十六条第一款规定，非法吸收公众存款或者变相吸收公众存款，扰乱金融秩序的，处三年以下有期徒刑或者拘役，并处或者单处罚金；数额巨大或者有其他严重情节的，处三年以上十年以下有期徒刑，并处罚金；数额特别巨大或者有其他特别严重情节的，处十年以上有期徒刑，并处罚金。以上是对这个问题的解答。
以上就是找法网小编为大家整理的关于非吸退赃不退会怎么样的相关法律知识了。综上可知，非吸退赃不退的话一般处罚更加严重，会根据具体的金额来判刑。如果您还有其他疑问，欢迎咨询找法网，我们会有专业的律师为您解答。
