Le musée provient du legs du Dr André Voulgre à sa ville natale de Mussidan. Médecin, il s'installa à Bordeaux où il fonda un Institut de physiothérapie et d'éducation physique. Il resta très attaché au Périgord, et toute sa vie il rassembla dans sa maison paternelle de Mussidan une collection évoquant le passé et l'évolution de la société périgourdine à travers la littérature, les arts, la vie quotidienne, l'évolution des techniques agricoles.