Il castello dei Del Carretto si trova nel borgo di Conscente, punto di confluenza di due valli, quella del Neva e del Pennavaira. Nella seconda metà del 1500 venne edificato, su un'altura più elevata rispetto alla precedente, il “nuovo castello di Conscente”. Da questa posizione si potevano controllare agevolmente le fortezze di Zuccarello e Castelvecchio di Rocca Barbena. Trasformato in un macello militare durante la campagna napoleonica, il castello, nel corso del XIX secolo, venne ristrutturato radicalmente: il ponte levatoio di legno lasciò il posto a quello in muratura e venne alzata una torretta circolare sul lato nord ovest.