是的，一定要出示离婚证才能登记。再婚的夫妻需要携带下述相关材料到户籍所在地的民政部门登记注册结婚：
1、双方的常住户口簿、居民身份证；
2、本人无配偶以及与对方当事人没有直系血亲和三代以内旁系血亲关系的签字声明；
3、当事人提交3张2寸近期半身免冠彩色合影照片（可当场拍照）；
《婚姻登记管理条例》
第十一条
办理离婚登记的内地居民应当出具下列证件和证明材料： （一）本人的户口簿、身份证 （二）本人的结婚证 （三）双方当事人共同签署的离婚协议书。 办理离婚登记的香港居民、澳门居民、台湾居民、华侨、外国人除应当出具前款第（二）项、第（三）项规定的证件、证明材料外，香港居民、澳门居民、台湾居民还应当出具本人的有效通行证、身份证，华侨、外国人还应当出具本人的有效护照或者其他有效国际旅行证件。离婚协议书应当载明双方当事人自愿离婚的意思表示以及对子女抚养、财产及债务处理等事项协商一致的意见。
延伸阅读：
离婚证一定要到登记地才能办吗
登记结婚一定要离婚证吗?
