下余村地处上郑乡西部山区，西临大溪村，北界黄坦村，东接坑口村，南面为栗树坑村，距离黄岩城区约60公里。永宁江源流——黄岩溪穿村而过。全村共有272户，843人。

下余村是一个典型的多山少地的山区村，全村共有农田面积116亩，主要位于剩半洋。全村林业资源丰富，有各类林业用地5500余亩，还有100亩杨梅基地。几年来在上郑乡党委、政府的支持和村两委带领下，下余村不断完善基础设施建设，建成剩半洋600米机耕路，650米枇杷基地操作道，一条30米长景观拦水坝，修建生态公厕一座。在发展经济的基础上，下余村还持续推进民生工程建设，截至目前，已完成饮用水入户、村庄整治、生态公厕和农村污水处理等工程建设，村容村貌有效改善，村民人居环境不断美化提升。

下余村与大溪村、下庙村、圣堂村、上郑村、蒋东岙村、干坑村、下郑村、美丰村、仙石村相邻。