Västergarns kyrka är Gotlands minsta medeltidskyrka, men hade kunnat vara en av de största om byggnaden som påbörjades i mitten av 1200-talet hade färdigställts. Dagens kyrka är enbart koret till en planerad större kyrka som aldrig kom att uppföras i sin helhet; troligen till följd av ekonomiska problem efter inbördeskriget 1288 och Västergarns minskade betydelse som hamn och handelsplats till förmån för Visby. I västmuren, där dagens ingångsport ligger, syns spåren efter en igenmurad portal som sannolikt var avsedd som triumfbågen till det planerade långhuset. Något torn blev det inte heller, utan enbart en takryttare i väster.
Nordväst om dagens kyrka ligger den övertorvade ruinen av dess romanska föregångare från 1100-talet. Detta till skillnad från de flesta andra medeltida kyrkor på Gotland, där om- och tillbyggnader vanligtvis gjordes etappvis med den gamla kyrkan som grund.
Vid Västergarns kyrka finns också ruinen av en kastal (medeltida försvarstorn), samt synliga spår av Västergarnsvallen – den kilometerlånga skyddsmur som omslöt den vikingatida och tidigmedeltida hamn- och handelsplatsen.
