Costruito attorno all'anno mille, era sottomesso al vescovo di Chiusi. Nel corso del XIII° secolo passò sotto il dominio di Siena. Nei secoli successivi fu conteso da diverse famiglie nobili. Nel XX° secolo è stato trasformato in sede di un’azienda vinicola. Si sviluppa in due aree distinte: la prima esterna, con edifici rurali; la seconda, interna, cui si accede attraverso un arco che si apre lungo una cinta muraria sormontata da merli. All’interno del Castello di Potentino è situato un piccolo oratorio dedicato a Sant’Antonio da Padova.
