中国电信局办公室需要穿制服。根据中国电信局官方数据显示，工作时间穿公司统一制服，制服要干净整洁、无破损、无污迹，衣扣要完好、齐全。头花、方巾要按照规定配戴整齐规范。