В 1851 г. кёльнский коммерсант Йоганн Генрих Рихарц пожертвовал 232 000 талеров на строительство в Кёльне музейного здания. Музей Вальрафа – Рихарца открылся 1 июля 1861 г. в здании, построенном по проекту кёльнского зодчего Эрнста Фридриха Цвирнера на территории бывшего монастыря миноритов уже после смерти Рихарца. Во время Второй мировой войны здание музея было разрушено.