谢某参加导游资格考试，并办理了登记注册手续，被某社聘用，在一次带团导游中，他按照旅行社的接待计划，安排和组织该团旅游者游览。该团旅游者对其在旅游途中的导游讲解服务质量不满，旅游结束后，向质监所投诉，要求退还导游服务费用。该社遂以旅游者投诉为由，不付谢某带团报酬，并辞退了谢某。对旅行社的这一做法，谢某十分不满，提出此次带团是受旅行社委派，旅行社应按约定支付其带团报酬并对投诉承担责任。而旅行社则以与谢某没有订立合同为由拒绝这一要求。据查，谢某在带团导游讲解过程中，确实存在着讲解服务质量问题。旅行社以与谢某没有订立合同为由拒绝支付报酬的说法是否成立？有何依据？