事故責任書即使對方不簽字，依然會有效力，并不會有什么影響。根據目前的法律規定，交通管理部門在認定書出具之后，并沒有權利能扣留機動車輛，即收到事故責任書認定書之后，車主就可以去交警隊提車。交通管理部門應當根據事故現場的勘查、鑒定結果，及時出具責任認定書，作為交通事故的證據。

交通管理部門已經對交通事故的責任作出了鑒定，無論當事人簽不簽字都不會改變這個陣容鑒定。讓當事人簽字，只是證明你已經知道了這個事故責任鑒定結果，而不是證明你接受了這個事故責任鑒定結果。如果當事人拒絕簽收，交警會在一周之內郵寄到當事人的住所中，當事人簽收或拒收，只要公安機關對拒收認定書的行為有記錄在案，都會視為送達。

如果對方一直拖著，不在交通事故責任認定書上簽字，那么交警部門可以根據《交通事故處理程序的規定》，出具單方面事故認定書，然后再根據這個認定書向法院起訴，維護自己的合法權益。向法院起訴前，維修車輛等損失的費用先由自己墊付，然后在通過起訴像對方追償。當然，如果有購買保險，可以先由保險公司進行墊付，然后再由保險公司追償。