硇洲岛不能随便去的原因主要有交通不便、安全问题、旅游体验不佳等。

硇洲岛需要乘坐渡船前往，而且下午5点以后就无法返回，这给游客带来了很大的不便。同时，岛上的交通也不便利，如果不开车前往，在岛上将会寸步难行。

此外，硇洲岛的安全问题也值得关注。有游客反映在岛上遭遇了骚扰，这可能会对游客的人身安全造成威胁。而且，岛上的一些电动车租赁服务也存在安全隐患，如刹车不灵敏等问题，这可能会增加游客发生意外的风险。

最后，从旅游体验的角度来看，硇洲岛的景点较为单一，而且岛上的收费也存在不合理的情况。例如，有游客反映岛内的收费很贵，而且存在乱收费的情况。这些因素都可能导致游客的旅游体验不佳。

综上所述，由于交通不便、安全问题以及旅游体验不佳等原因，硇洲岛并不是一个可以随便前往的旅游目的地。游客在前往之前需要做好充分的准备和了解，以确保旅途的安全和愉快。