Il piccolo centro storico di Leporano si sviluppa intorno ad un maestoso Castello in carparo, costruito nel '600 su pianta quadrangolare comprendente un preesistente nucleo aragonese. Il Castello presenta una torre a nord-ovest della costruzione, quadrata e fortemente a scarpa nella parte più bassa. Sul lato prospiciente la costa sopravvivono alcune strutture di questa cinta difensiva: bastioni rettilinei, torri cilindriche e contrafforti, nonché una delle porte, quella "di Taranto" che immette nel paese per chi proviene da ovest.