在此情况下，被羁押者或被告人须前往收取保证金之相关银行机构进行保证金的返还手续办理。若被拘押者或被告在其保释期内未触犯任何法律法规，亦无刻意筹划新罪行之行为，在其取保候审的身份得以解除、强制措施获得更改或是刑罚得以执行的同一时间点，公安机关应通知银行按照保证金实际缴纳金额如数返还给被羁押者或被告人。

《中华人民共和国刑事诉讼法》第六十八条
人民法院、人民检察院和公安机关决定对犯罪嫌疑人、被告人取保候审，应当责令犯罪嫌疑人、被告人提出保证人或者交纳保证金。第七十二条取保候审的决定机关应当综合考虑保证诉讼活动正常进行的需要，被取保候审人的社会危险性，案件的性质、情节，可能判处刑罚的轻重，被取保候审人的经济状况等情况，确定保证金的数额。提供保证金的人应当将保证金存入执行机关指定银行的专门账户。第七十三条犯罪嫌疑人、被告人在取保候审期间未违反本法第七十一条规定的，取保候审结束的时候，凭解除取保候审的通知或者有关法律文书到银行领取退还的保证金。