潘祖堯顧問有限公司的前身乃潘祖堯建築師事務所，提供建築設計及項目開發顧問服務，設計構思尊重業主的意願、社會的要求、注重地方風格、氣候及環保原則，而工作強調重質不重量的宗旨。
潘祖堯建築師事務所成立於1973年1月，完成的業務包括：石澳石屋的村屋、嘉頓麵包廠的工業可行性研究、嘉頓麵包廠的擴建、蒲台島渡假村發展計劃、元朗鄉村堅的方案、加達住宅商業大樓、金馬倫道飯店的發展顧問、三十四層商住高級樓宇豐樂閣、國泰飯店的翻新工程，此外曾參加菲律賓政府主辦的龐大平民徙置區（十四萬人口的設計比賽）和香港銀禧體育館場地設計比賽。1976年與羅素建築師組成羅素∕潘祖堯建築師集團，合作業務包括：太古水塘和跑馬地大型屋村計劃、弱智兒童院（獲1994年香港復康聯會設計優異獎）、還有新畿內亞的海洋館和新加坡的海洋公園計劃、英國納士敦（Denys Lasdun）合作的香港理工學院的設計比賽（是六個中選之一）和有特別設備的紙幣廠（這個廠的設計，得到香港建築師學會1986年的優秀設計獎）。
