赣州市国土资源局管辖。根据中国的行政区划，国土资源局负责管理和监督土地、矿产资源的开发、利用和保护工作。江西省赣州市沙石镇吉埠村的国土资源管理归属于赣州市国土资源局管辖。