关于放弃继承无效是否要把所有继承人都告上去，需要根据不同情形具体分析：
一、一般情况
在通常情形下，如果仅是要确认某一位继承人放弃继承的行为无效，那么只需将该放弃继承的继承人列为被告。
这是因为诉讼的关键在于解决这一特定继承人放弃行为的效力问题。
例如，在一个简单的遗产继承案件中，某位继承人在没有充分合理理由的情况下突然宣布放弃继承，而其他继承人对此放弃行为的真实性或合法性存在质疑，想要确认其无效。
此时，只需针对该作出放弃行为的继承人提起诉讼，将其列为被告，法院会着重审查该放弃行为是否符合法律规定和相关事实。
二、涉及多方权益纠纷情况
当放弃继承行为无效可能会对其他继承人的权益分配产生影响，并且各继承人之间在遗产分配等问题上存在较大争议时，为了从根本上解决纠纷，可能就需要将其他相关继承人也列为共同被告或者第三人。
在这种情况下，将其他相关继承人纳入诉讼，能够在一个诉讼程序中全面审查和确定各继承人的权利义务关系。
具体确定被告范围时，必须根据案件的实际情况，结合相关证据和法律规定进行综合判断，从而实现诉讼目的并保障自身合法权益。

案情回顾:

小朱去世后留下遗产，其中包含特殊房产。小胡突然宣布放弃继承，小李等其他继承人质疑其放弃行为的合法性，欲确认该行为无效，且各方在遗产分配上存在较大争议，争议点在于确认放弃继承无效时是否要将所有继承人都列为被告。

案情分析:

1、若仅是确认小胡放弃继承行为无效，通常只需将小胡列为被告。因为诉讼关键在于解决小胡放弃行为的效力问题，法院会审查其放弃行为是否符合法律和事实。
2、当放弃行为无效会影响其他继承人权益分配且存在较大争议时，如特殊房产分配受影响，就需将其他相关继承人列为共同被告或第三人，以全面确定各继承人权利义务关系。