建筑垃圾不能回填的原因主要是其成分复杂，强度和稳定性不足，以及对环境和工程安全的不利影响。

以下是详细的解释：

一、成分复杂且强度和稳定性不足

建筑垃圾中包含了大量的混凝土、砖瓦等废弃物，这些废弃物经过破碎、筛分等处理后才能用于回填。然而，建筑垃圾中的杂质较多，成分复杂，其强度和稳定性往往不能满足回填材料的要求。直接使用建筑垃圾进行回填可能会导致地基不稳、承载力不足等问题。

二、对环境的潜在影响

建筑垃圾中可能含有有害物质，如重金属、化学物质等。若未经妥善处理，这些有害物质可能渗入土壤和地下水，对环境造成污染。此外，建筑垃圾中的尖锐物、大块物料等也可能对周围的植被和生态系统造成破坏。因此，出于环境保护的考虑，建筑垃圾通常不能直接用于回填。

三、对工程安全的影响

建筑垃圾的回填应用需要考虑到工程安全。由于建筑垃圾的特性和成分差异，其作为回填材料时，难以保证其均匀性和密实性。这可能导致回填区域出现沉降、变形等问题，进而影响到建筑物的稳定性和安全性。为确保工程安全，通常选择更为稳定和可靠的回填材料。

综上所述，基于建筑垃圾的成分、对环境的影响以及对工程安全的影响，建筑垃圾不宜直接用于回填。在进行土方回填时，应选择合适的材料，确保工程的稳定性和安全性，同时保护环境。