Jelsa befindet sich in einer Bucht an der Nördlichen Seite der Mitte von Insel Hvar. Die Stadt wurde um 5 Plätzen gestaltet und sie besteht aus 2 Hauptteilen, Vela Banda (Südseite) und die Mala Banda (Nordseite). Die Sand-, Kies- und Felsenstrände, so wie der dichte Kieferwald sind den Touristen sehr anziehend.
Die populärsten Strände:
Mina- 500 m von Jelsa entfernt, Sandstrand ideal für Kinder.
Grebišće- Sandstrand in einer Bucht 1,5 Km von Jelsa. Es bestht aus 2 Buchten - Vela Grebišća und Mola Grebišća.
Zenčišća- Bad 3 km von Jelsa entfernt.
Vala Sv. Luke - Kiesstrand 4 km östlich von Jelsa.
Bočić - Bad mit Beton- und Steinplatten, 300 m von Zentrum Jelsas entfernt.
Soline- Halbinsel, 6 km von Jelsa enfernt, voll von Buchten und Kiesstränden an der südlichen Seite. An der Nordseite von Soline befinden sich viele kleine Strände mit schön natürlich geformten Steinplatten.
Zečevo - eine kleine Insel, die etwa 20 min Bootsfahrt von Jelsa entfernt.
Mala Stiniva- Bucht mit Kristalklarem Meer und Kiesstrand zirka 30 Minutenfahrt von Jelsa enfernt, bekant nach vielen Senkrechten Felsen die es umgeben.
Jelsa ist an, in Dalmatien seltener, Vegetation reich, und es wurde für sehr qualitäten Wein bekannt.