Zapach lawendy, który czuć na całej wyspie Hvar, jest doskonałym przywitaniem gości, których Jelsa przyciąga już od czasów antycznych. Oprócz pozostałości rustykalnych willi na pobliskich polach, które świadczą o bogatej przeszłości, Jelsa urzeka także kamiennymi pomnikami, które ozdabiają zbiory atrakcyjnego Lapidarium.
Śródziemnomorskie miasteczko, nad którym dominuje elegancka dzwonnica kościoła Matki Boskiej Zdrowia, zachwyca swoich gości także siecią kamiennych domów, pomiędzy którymi kryje się niezwykły kościółek św. Marii z XIV wieku. Szereg atrakcji znajduje się na głównym placu, gdzie można odświeżyć się chłodną wodą z fontanny lub, nieoczekiwanie w tym miejscu, potoku.