除了分配到基层部队的向导人员以外，剩下的朝鲜部队都被调派到后方去负责后勤任务。
由于清军投入了大量人力，在河谷中修建渡河木桥的进展非常快，高桥南不愿再拖下去，于是战斗在联军抵达香山两小时之后便打响了。不过高桥南的第一个目标并不是在河谷中扎营的清军主力，而是被分配到砍树任务的这部分人。
几乎是在同一时刻，香山河谷内多处地点响起了火枪射击的声音，数支伐木队遭到了来自密林中的袭击。虽然有一些悍不畏死的清兵试图使用手里的伐木工具实施反击，但他们甚至都没能看到敌人的身影，便被林子里射出的子弹打倒在地。
为了确保工作效率，清军并没有使用俘虏的朝鲜人来充当伐木工，这样也不用再分派更多的人手去充当看守。