可惜在人选方面流于片面，只挑选中央认同的人物，因而缺乏反对意见。另一方面，“港事顾问”成为了中央认同的标籤，使不少不获得聘任的人士以各种方式谋求获得聘任。例如，前香港城市大学校长郑耀宗就曾因为香港理工大学校长潘宗光获聘而自己未有受聘而召开记者招待会抗议，引起其他人效尤，结果使中央多次需要扩大港事顾问团的团体。而有反对中央的人士因此揶揄这批人，戏称他们为“讲是顾问”。