Das Schlössle gehört, genau wie das Türmle in der Schulstraße und die ehemalige Obervogtei in der Hauptstraße, zu den drei historischen Bauten in Oeffingen, die noch aus der Zeit der Herrschaft des Augsburger Domkapitels (1619 bis 1803) erhalten und immer einen Besuch wert sind.