1970年代初期，社會輿論認為，若然可以集政府各個房屋部門為一，房屋工作將更有效率，為香港提供更佳的服務。結果，香港政府於1973年把徙置事務處、屋宇建設委員會與廉租屋計劃合併，成為單一部門，名為香港房屋委員會，屬下的工作分部正是新成立的房屋署。新發展部門旨在掌理香港的綜合房屋計劃，並管轄各個公共屋邨(香港房屋協會的屋邨除外)。合併以後，徙置屋邨得以提升至標準的住宿水平，以往的屋宇建設委員會與政府廉租屋邨亦可繼續提供較高質素的發展項目。