应该如何证明已抵押的房产

可去当地房地产管理部门办理。
《城市房地产抵押管理办法》对其有相应的规定：
第六条 国家实行房地产抵押登记制度。国务院建设行政主管部门归口管理全国城市房地产抵押管理工作。省、自治区建设行政主管部门归口管理本行政区域内的城市房地产抵押管理工作。
直辖市、市、县人民政府房地产行政主管部门（以下简称房地产管理部门）负责管理本行政区域内的房地产抵押管理工作。