根据《中华人民共和国旅游法》第五十七条，旅游者在行程开始前解除合同的，应当按照约定向旅游经营者支付违约金，除非双方协商一致解除合同。因此单方面解除合同并不一定免责。