一方想和残疾人离婚是可以离的，我国实行婚姻自由、男女平等的婚姻制度。残疾人士的离婚程序和普通人的离婚程序并无不同，具体离婚方式如下：
1、协议离婚：夫妻双方自愿离婚的，应当签订书面离婚协议，并亲自到婚姻登记机关申请离婚登记。离婚协议应当载明双方自愿离婚的意思表示和对子女抚养、财产以及债务处理等事项协商一致的意见。
2、诉讼离婚：一方提起离婚诉讼，如果夫妻感情确已破裂，调解无效的，法院判决准予离婚。离婚时法院会考虑残疾人的实际情况，在财产方面会更多的照顾生活困难的一方。

《民法典》第一千零四十一条
婚姻家庭受国家保护。
实行婚姻自由、一夫一妻、男女平等的婚姻制度。
保护妇女、未成年人、老年人、残疾人的合法权益。