Før 1867 havde kroen til huse i Kongsgården. I 1912 blev kroen udvidet med en pavillon, som i dag stadig er i brug i sommerhalvåret. Det er for øvrigt Danmarks ældstbevarede kropavillon, der stadig benyttes som kro. Hjarbæk kendes helt fra 1440 (Hiardbeck). Trods sin lidenhed har Hjarbæk gennem århundreder været en by af betydning, idet Viborg her havde sin havn før jernbanerne og motoriseringen s
log igennem. Hjarbæk ligger meget idyllisk omgivet mod nord og øst af stort formet bakkelandskab, som går helt ud til kysten og afsluttes med bratte klinter. Mod sydvest er et blidere, kuperet landskab, der gradvist glider over i engstrækninger. Hjarbæk Fjord er i sin helhed fredet og udlagt til fuglereservat. Hjarbæk er ufriseret natur, et dejligt sejlermiljø, hvor sommerens store højdepunkt er verdensmesterskab i sjægtesejlads (sjægtene er de oprindelige fiskefartøjer hjemhørende i Limfjorden), kønne huse og et landskab, der byder til lange, dejlige traveture - og naturligvis Danmarks smukkeste solnedgang!