Landsbyen Harritslev har fra middelalderen haft betydning med hovedgården, der senere flyttede ud og blev til Harritslevgård.

Efter udflytningen fra Harritslev har hovedgården opslugt dele af landsbyen. Landsbyen blev liggende og til sidst var den næsten omgivet af Harritslevgårds jorder. Landsbyen har stadig i dag det præg, der kendetegner naboskabet med en herregård. Alleen (overskåret af Odensevej, 1960)og byens huse med en blanding af gårde, håndværkernes værksteder, købmand og daglejerboliger.