异地参加高考存在以下一些不利因素：

不熟悉当地环境 ：外地学生不熟悉当地的环境、地理位置，需要提前了解考试场所并安排住宿等，增加了不少开销，也浪费了复习时间。

增加教育复杂性 ：异地高考可能会导致部分地区的教育资源出现埋没的情况，城乡教育资源差距进一步拉大，甚至可能导致农村无教育的状况。

政策执行难度 ：制定和执行异地高考政策需要考虑诸多因素，如户籍、学籍、居住条件等，政策执行难度较大。

社会舆论压力 ：异地高考可能会引起本地考生的不理解与不满，增加社会舆论压力，影响社会稳定。

高考录取率影响 ：如果彻底放开异地高考，可能会造成高考考生的大范围流动，使原本录取率较高省份的录取率下降，当地考生失去了原来的高考福利，产生极大的抵触情绪。

时间和经济成本 ：异地高考需要学生在不同地区之间往返奔波，增加时间和经济成本。

适应不同考试和文化环境 ：学生需要适应不同的考试形式和文化环境，这对于适应能力较弱的学生来说可能会造成一定的困难。

高等教育资源紧张 ：异地高考可能导致高等教育资源更加紧张，特别是在名牌大学集中的大城市，加剧当地考生的竞争压力。

社会群体矛盾 ：异地高考可能引发本地考生和家长与外地考生和家长之间的矛盾，特别是当外地考生数量增加时，可能加重原有竞争压力。

教育资源与质量压力 ：异地高考可能导致大城市教育资源的紧张，学校班额增加，教师工作负担加重，这对教育质量提出了新的挑战。

综上所述，异地参加高考虽然有助于教育公平和减少学生流动的不便，但也带来了一系列挑战和问题。建议政策制定者在实施异地高考政策时，要充分考虑这些不利因素，制定更加周全和细致的政策措施，以确保教育公平和社会稳定。