Avnsø er en sidedal til Gudenåen og har form som et par lorgnetter, som er en brille med næseklemme, og er gennem tiden bleevt kaldet for Holger Danskes briller.
Søen var tidligere en lukket sø, men i 1863 gravede Skovridder Klüver en kanal, som åbnede op for at turister kunne sejle ind til søen. I første omgang havde Klüver ikke tilladelse hertil, og i dag er kanalen næsten skjult af træer, hvor en lille træbro giver fodgængere adgang over kanalen.
Det er ikke tilladt at sejle med motorbåd.