在我国的法律体系中，是允许与残疾人离婚的。
当夫妻双方都自愿离婚时，就需要签订书面的离婚协议，并且要亲自前往婚姻登记机关去申请离婚登记。
婚姻登记机关会仔细核查双方是否真的是自愿离婚，以及在子女抚养、财产分配以及债务处理等重要事项上是否已经达成了一致。
只有当这些条件都满足时，才会予以登记，然后颁发离婚证。
而如果只有一方要求离婚，那么他可以向法院提起诉讼。
法院在审理离婚案件的时候，主要依据夫妻之间的感情是否已经确实破裂来决定是否准予离婚。
要是夫妻感情确实已经破裂，并且经过调解也无法挽回，那就应当准予离婚。
在这个过程中，在财产分割等方面，法院会根据具体的实际情况，依照法律规定进行妥善处理，坚决保障残疾人的合法权益。
总之，无论是选择协议离婚这种相对和平的方式，还是通过诉讼离婚这种较为激烈的途径，都必须严格按照法律规定来进行操作，这样才能确保整个离婚过程既合法又公正，让每一个相关方的权益都能得到应有的维护。