去房产局查询。
登记备案是房地产行政管理部门加强对房屋租赁市场的一种行政管理手段与方式，但登记备案不是租赁合同生效的必要条件。
所以实践中，有的租赁合同是没有备案的。
至于是否有备案号，以房产局查询结果为准。
根据《中华人民共和国民法典》的相关规定，租赁合同是诺成合同。
租赁合同的成立不以租赁物的交付为要件。

《房屋登记办法》第七条
办理房屋登记，一般依照下列程序进行：
（一）申请；
（二）受理；
（三）审核；
（四）记载于登记簿；
（五）发证。
房屋登记机构认为必要时，可以就登记事项进行公告。