13. yüzyılda inşa edilen Le Vergeur, o zamanlar zengin tüccarların yaşadığı bir bölgede yer alan aristokrat bir konuttu. 16. yüzyılda otelin mülkiyeti Nicolas Le Vergeur'e geçti ve otel, onu dönüştürerek özel bir saray karakteristiğine kavuşturdu. iç cepheleri bir avlu etrafında düzenlenmiş. Hugues Krafft daha sonra özel olarak, dünya çapında yaptığı seyahatlerden kendine özgü objeler, giysiler ve fotoğraf plakaları getirerek otelde önemli bir etnografik koleksiyon oluşturmuş. Ölümünün ardından koleksiyonları, mobilyalarıyla birlikte, tablolar, kütüphane ve arşiv, çok sayıda bağışçının cömertliği sayesinde her yıl zenginleşen bir müze haline geldi.