Særløse Kirke ligger midt i Særløse by og en del af Kirken er bygget i 1100-tallet, mens bl.a. Tårnet stammer fra 1500-tallet.Ifølge sagnet er kirken bygget på et hedensk offersted. Det siges at man ofte gjorde dette i den første kristne tid – angiveligt for at lette overgangen til kristendommen.
Som alle andre middelalderkirker er Særløse Kirke i tidens løb blevet ombygget flere gange. Man ved ikke præcist, hvornår bugningen i kirken er påbegyndt første gang, men kirkens ældste dele – skibets langmure – stammer fra romansk tid dvs. 1050-1250. Langmurene er rejst af rå, kløvede kampesten.