Dentro del núcleo de población se encuentra el punto más meridional de la Península Ibérica, la puerta de Tarifa, occidente geográfico que se sitúa en la isla de Las Palomas, unida hoy a la propia ciudad por medio de una carretera-calle, que sirve de acceso al faro que en ella se ubica.
El Cabo o Punta de Tarifa sirve además de divisoria a las aguas del mar Mediterráneo y del océano Atlántico, que se cruza justo enfrente de la propia ciudad. Está situada en la parte más angosta del canal o estrecho de Gibraltar a una distancia mínima de 14 kilómetros de las costas marroquíes, lo que la convierte en la ciudad europea más cercana al continente africano.
Castillo de Santa Catalina, es una fortaleza localizada en el Cerro de Santa Catalina, cerca del puerto de Tarifa y del centro de la ciudad. Fue construido en 1933 y actualmente se encuentra en desuso.