我的身份证被卖卡的人拿去给别人办了张卡，别人拿这卡到处发一些诽谤信息，被诽谤的人通过移动公司的用户资料找到我，我又通过移动公司找到了销售点的老板，证明了这卡不是我办理的（我本来打算补卡后来没补，身份证复印件忘拿走，卖卡的老板不小心整混淆了，现在卡报停了）。被诽谤的人，要我们找出诽谤人，卖卡的老板不知道这人，我就更不知道了。可是被诽谤的人不服，说我给卖卡的老板有责任，要拿钱作赔偿。请问我有责任吗？要给他作赔偿？还是卖卡的老板有责任？