招标人最迟应当在与中标人签订合同后五日内，具体的退还规定如下：
1、《工程建设项目施工招标投标办法》
第六十三条规定，招标人最迟应当在与中标人签订合同后五日内，向中标人和未中标的投标人退还投标保证金及银行同期存款利息。
2、《中华人民共和国招标投标法实施条例》
第三十一条，招标人终止招标的，应当及时发布公告，或者以书面形式通知被邀请的或者已经获取资格预审文件、招标文件的潜在投标人。已经发售资格预审文件、招标文件或者已经收取投标保证金的，招标人应当及时退还所收取的资格预审文件、招标文件的费用，以及所收取的投标保证金及银行同期存款利息。
3、《中华人民共和国招标投标法实施条例》
第五十七条，招标人和中标人应当依照招标投标法和本条例的规定签订书面合同，合同的标的、价款、质量、履行期限等主要条款应当与招标文件和中标人的投标文件的内容一致。招标人和中标人不得再行订立背离合同实质性内容的其他协议。
一、施工合同未备案的效力是怎样的
施工合同未备案的效力是属于合法有效的，现在已经取消了建筑施工合同的备案。
《房屋建筑和市政基础设施工程施工招标投标管理办法》
第四十六条
招标人和中标人应当自中标通知书发出之日起30日内，按照招标文件和中标人的投标文件订立书面合同；招标人和中标人不得再行订立背离合同实质性内容的其他协议。
中标人不与招标人订立合同的，投标保证金不予退还并取消其中标资格，给招标人造成的损失超过投标保证金数额的，应当对超过部分予以赔偿；没有提交投标保证金的，应当对招标人的损失承担赔偿责任
招标人无正当理由不与中标人签订合同，给中标人造成损失的，招标人应当给予赔偿。
二、中标了可以不签合同吗
中标了不可以不签合同。招标人和中标人应当依照招标投标法和条例的规定签订书面合同，合同的标的、价款、质量、履行期限等主要条款应当与招标文件和中标人的投标文件的内容一致。招标人和中标人不得再行订立背离合同实质性内容的其他协议。
