Si hanno notizie del centro dal 714 quando era certamente possedimento degli Aldobrandeschi e aveva il nome di Petra. Nel 1252 divenne Libero Comune, ma la sua indipendenza durò al massimo un secolo; nel 1274 venne incluso nella Contea di Santa Fiora con la spartizione dei possedimenti della famiglia Aldobrandeschi. Nel Trecento si sa con certezza che era già possedimento di Siena, che successivamente la concesse a famiglie potenti in cambio di favori di natura finanziara, come i Piccolomini prima e i Salimbeni successivamente, che usarono Castiglione d'Orcia proprio come una delle basi per la loro rivolta contro i senesi. Successivamente Castiglione passò in mano ai fiorentini, che nel 1605 la affidarono ai nobili bolognesi della famiglia Riario.
