异地高考制度旨在解决外来务工人员子女在流入地参加高考的问题，促进教育公平。然而，这一制度也存在一些潜在的危害，主要包括以下几个方面：

教育资源分配不均 ：异地高考可能导致城乡教育资源差距进一步拉大。流入地的高考资源可能无法满足大量外来考生的需求，导致农村无教育的状况出现，农村教师流失成为必然。

增加教育复杂性 ：异地高考需要制定和执行一系列政策，如户籍、学籍、居住条件等，政策执行难度较大。此外，异地高考可能会引起本地考生的不理解与不满，增加社会舆论压力，影响社会稳定。

社会舆论压力 ：异地高考可能会引发本地考生的抵触情绪，产生新的留守儿童问题。大城市人口恶性膨胀，催生新的限制标准，削弱了当地人的教育权益。

高考录取率下降 ：如果彻底放开异地高考，可能会导致高考考生大范围流动，使原本录取率较高省份的录取率下降，影响当地考生的利益。

增加经济负担 ：外地学生不熟悉当地环境，需要提前了解考试场所并安排住宿等，增加了不少开销，也浪费了复习时间。

政策执行难度 ：异地高考政策需要考虑诸多因素，政策执行过程中可能会遇到各种困难和挑战，影响政策的有效实施。

综上所述，异地高考制度虽然有助于促进教育公平，但也存在诸多潜在危害。为了平衡各方利益，需要在政策制定和执行过程中充分考虑各种因素，确保政策的公平性和可行性。