中世の穀物倉庫は、17世紀に改築され、拡張されました。現在の「パンハウス」という名前は、1713年にこの倉庫が質屋（Bank van Lening）として機能し始めたことに由来しています。この銀行は隣接する改革派市民孤児院の収入源として機能しました。1989年には建物が修復され、その後、ウトレヒト市の考古学および建築歴史センターがここに設立されました。