不一定是全部房间。警察查房一般查黄赌毒，在非常时期查，可能和案件有关，比如排查等。治安管理处罚法规定，公安机关对与违反治安管理行为有关的场所、物品、人身可以进行检查，检查时，人民警察应当出示工作证件和县级以上人民政府公安机关开具的检查证明文件。《公安机关办理行政案件程序规定》要求，在调查取证时，警察不得少于两人，并需要表明执法者身份。

警察为维护社会治安，到宾馆查房，出示警察证并表明人民警察身份就可以了;如果是搜查，一般要出示搜查证。

法律依据

《刑事诉讼法》第一百零九条 为了收集犯罪证据、查获犯罪人，侦查人员可以对犯罪嫌疑人以及可能隐藏罪犯或者犯罪证据的人的身体、物品、住处和其他有关的地方进行搜查。