根据《旅游法》相关规定，旅行社在组织旅游活动时，如果未尽到安全保障义务，导致旅游者人身损害的，应当承担违约责任（因为其违反了与游客的合同约定）、侵权责任（因为其行为直接侵害了游客的合法权益）以及民事责任（赔偿游客的损失）。而行政责任和刑事责任通常是指对旅行社的行政处罚或刑事追责，不直接适用于游客的损害赔偿，除非涉及故意或重大过失。