Ang istasyon ng riles ng Rolandzek ay itinayo noong 1856 at maya-maya ay naging isang tanyag na patutunguhan sa bakasyon para sa maharlika at mga piling tao sa kultura sa buong Europa. Ang gusali, nakapagpapaalala ng isang Italyano na villa ng Renaissance, nag-host ng mga konsyerto at hapunan, at dinaluhan nina Queen Victoria, Otto von Bismarck, Heinrich Heine, Franz Liszt at George Bernard Shaw. Ang Unang Digmaang Pandaigdig ay nagtapos sa libangan sa Rolandzek, at hanggang 1964 na ang mga eksibisyon at konsyerto ay ginanap ulit sa istasyon; mabilis itong naging sentro ng buhay pangkulturang nasa ilalim ng tagapangasiwa nito na si Johannes Wasmuth. Nagtatag si Wasmut ng isang uri ng komyun ng mga artista doon, na umusbong hanggang sa kanyang kamatayan noong 1997. Nagkaroon muli ng katahimikan, na nagtapos noong 2004 nang ang Hans Arp at Sophie Taeber-Arp Foundation, na ang mga gawa mula sa koleksyon ay ipinakita sa panahon ng buhay ni Vasmut sa basement hall ng istasyon, ay ginawang Hans Arp Museum ang dating naayos.
Ngunit naiintindihan din mismo ni Vasmut na 400 na gawa mula sa pagkolekta ng pondo ay walang sapat na puwang sa isang gusaling ika-19 na siglo kahit na sa ilalim ng pinakamainam na mga kondisyon; samakatuwid, bumalik noong 1980s, lumingon siya sa arkitekto ng Amerika na si Richard Mayer na may kahilingan na lumikha ng isang proyekto para sa isang bagong gusali ng museyo - malapit. Ang pagpapatupad ng planong ito ay nahadlangan ng iba`t ibang mga paghihirap, kaya't nagsimula lamang ang pagtatayo noong 2004, at ang customer ay hindi na Vasmut, ngunit ang Hans Arp at Sophie Taeber-Arp Foundation.
Ang istasyon ng Rolandzek ay matatagpuan sa mismong baybayin ng Rhine, at sa likuran nito ang mga pader ng lambak ng ilog ay matarik na tumataas. Samakatuwid, ang isang bagong gusali ay maitatayo lamang sa tuktok ng isang kalapit na burol. Ngunit isang espesyal na problema para kay Mayer ay ang koneksyon ng luma at bagong mga gusali, dahil ang dalisdis sa pagitan nila ay maginhawa para sa mga umaakyat, ngunit hindi para sa mga ordinaryong mahilig sa sining. Iminungkahi ni Mayer na maghukay ng isang 40-metro na lagusan sa likod ng istasyon na kumpleto, patungo sa kailaliman ng burol. Mula doon, angat ng mga bisita ay 40 metro patungo sa korteng kono ng baso ng bagong museo, na nag-aalok ng malalawak na tanawin ng Rhine Valley. Inihahanda ng prinsipyo ng kaibahan ang manonood na maunawaan ang magkakaibang artistikong pamana ng mag-asawang Arp sa mga maliwanag na bulwagan ng bagong gusali. Ang koneksyon nito sa istasyon ay pinahusay ng dibisyon ng mga pag-andar: ang mas mababang gusali ay matatagpuan sa foyer, ticket office, museum shop at library, habang ang lahat ng mga gallery ay matatagpuan sa itaas. Ang kongkretong lagusan sa ilalim ng burol ay mariin na panteknikal at hindi nakakainam; ang tanging detalye na binubuhay ito ay ang 18-metro na makinang na spiral ng Kaa sculpture ni Barbara Trautmann.
Ang isang ganap na magkakaibang kapaligiran ay naghihintay sa mga bisita sa itaas na gusali: ang gitna nito ay isang maluwang na foyer na kumukonekta sa lahat ng tatlong palapag. Sa mas mababang antas, bilang karagdagan sa mga bulwagan ng eksibisyon, mayroon ding mga lugar na pang-administratibo at isang sentro ng pang-edukasyon.
