发生交通事故的时候交警队迟迟不给责任认定书当事人是可以向法院起诉，由法院判令交警部门履行职责。
迟迟不给责任认定书，这属于违法不履行职责的行政不作为。因为一般情况下公安机关交通管理部门应当自现场调查之日起十日内制作道路交通事故认定书。交通肇事逃逸案件在查获交通肇事车辆和驾驶人后十日内制作道路交通事故认定书。

《道路交通事故处理程序规定》第六十二条
公安机关交通管理部门应当自现场调查之日起十日内制作道路交通事故认定书。交通肇事逃逸案件在查获交通肇事车辆和驾驶人后十日内制作道路交通事故认定书。对需要进行检验、鉴定的，应当在检验报告、鉴定意见确定之日起五日内制作道路交通事故认定书。
有条件的地方公安机关交通管理部门可以试行在互联网公布道路交通事故认定书，但对涉及的国家秘密、商业秘密或者个人隐私，应当保密。