电信诈骗是一种严重的违法犯罪行为，即使只是拿工资，也可能需要退赃。
在电信诈骗案件中，虽然有些人可能只是从事一些辅助性工作，如发送诈骗短信、接听诈骗电话等，并未直接实施诈骗行为，但他们参与了诈骗活动的运作，从诈骗行为中获得了经济利益，这种情况下就需要将所得的工资等财物退还给受害者。
这是因为他们的行为在一定程度上帮助了诈骗分子实施犯罪，对受害者造成了损失，所以有义务返还通过这种违法活动所获得的钱财。
法律通常会根据每个人在案件中的具体作用和情节来确定其应承担的责任和退赃义务，不能因为只是拿工资就免除退赃的责任。
总之，只要与电信诈骗活动有牵连并获得了利益，就可能需要退赃以弥补受害者的损失。