这种情况中，旅行社免除自己主要的责任，不能当然免责，所以即使旅途中发生的是不可归责旅行社的事由，但是最终还是得由旅行社负责。
根据我国法律的规定，由于这种约定是旅行社为免除自己的责任，排除主要权利的格式条款，是无效的，所以即使是旅途意外，旅行社也要依约负有安全保障的义务。

《民法典》第四百九十七条：有下列情形之一的，该格式条款无效：
（一）具有本法第一编第六章第三节和本法第五百零六条规定的无效情形；
（二）提供格式条款一方不合理地免除或者减轻其责任、加重对方责任、限制对方主要权利；
（三）提供格式条款一方排除对方主要权利。