Významnou institucí obce Všeň byla a je škola. Do dnešní podoby byla přebudována v roce 1876. Dosud slouží jako trojtřídní základní škola pro děti z obce a okolí.