如果双方都同意离婚，不管孩子是不是在哺乳期，都可以协议离婚。只需双方到一方户口所在地的民政局办理即可。但是，在哺乳期限内的，男方一般情况下不得起诉离婚。不仅在哺乳期，在女方怀孕期间、或者中止妊娠后六个月内，男方都不得提出离婚，除非有特殊的理由，法院认为有必要受理的。

《民法典》第一千零八十二条
女方在怀孕期间、分娩后一年内或者终止妊娠后六个月内，男方不得提出离婚；但是，女方提出离婚或者人民法院认为确有必要受理男方离婚请求的除外。