首先，政治因素是制约大陆居民访问台湾的重要原因之一。自1949年中共政府在中国大陆建立政权以来，双方就分属不同政体，这导致了长期的隔离状态。在这种背景下，大陆和台湾之间存在着紧张关系，两岸官方之间还没有正式建立外交关系。大陆政府对待台湾问题采取一国两制政策，即坚持“一个中国”原则，不承认台湾为一个独立国家，因此不允许大陆居民自由出访。

其次，由于历史因素，大部分大陆居民对于 台湾有着浓厚的情感联系，他们希望能够亲自探访、体验那里的文化和生活，但这也被视为支持“两个国家”的行为。因此，大陆政府为了维护国家主权和领土完整，对此类活动进行严格控制。

再者，从法律角度来说，大陸對於公民出入台灣設有嚴格限制。大陸憲法規定國家領土完整不可侵犯，並且《中華人民共和國國籍法》明確規定公民不得擁有他國國籍或居留權。這意味著如果一個人持續以非法方式訪問台灣，那麼他們可能會面臨法律後果。

另外，还有一些实际操作上的难题，比如签证政策、通关规定等。这些建立都由兩岸官方根据自身利益来制定，有时候会因为政治考量而发生变化，使得旅行计划变得困难甚至无法实现。

同时，也有一些经济因素影响了旅行自由。大陸與台灣間貿易關係緊張導致旅遊交流受到限制。此外，由於兩地之間還未簽訂相應的旅行協議或者互免簽證協議，大陸游客前往台灣需要经过繁琐的手续，并且可能需要较长时间等待回执才能完成签证手续。

最后，一些安全考虑也是不能去台湾的一个原因。在过去，有过几起涉及中國公民赴台后被迫遣返回国内的情况，这让许多人对前往台灣充满犹豫。而在当前紧张国际形势下，安全风险增加，更是使得一些原本打算去旅游的人改变了计划，而选择其他目的地。