不用。在北京市六环路以内行驶的外埠车辆，以及前往昌平、怀柔、延庆城关镇行驶的外埠车辆，需办理进京通行证，去古北水镇的路线是从北京市密云区进入，不需要进入市区，因此不需要办理进京证。