Когда Арсению исполнилось 25 лет, мать Варвара подарила ему земельный участок на Воздвиженке, прямо рядом со своим домом. Такой намек, что пора бы уже мальчику съехать от маменьки. Арсений был известным в Москве тусовщиком, ловеласом и прожигателем жизни. Он решил построить на этом участке эффектный дом-замок, для балов и вечеринок.
Архитектором своей резиденции он предложил стать Виктору Мазырину. Ребята познакомились на Всемирной выставке в Антверпене, где тот делал русский павильон. Мазырин был странным. Верил в переселение душ, практиковал обряды и медитации, а себя считал реинкарнацией египтянина, построившего пирамиды. На медитации он подсадил и Арсения.
— В каком стиле будем строить? — спросил Виктор своего приятеля. — Можно в классическом, романском, барокко...
— Строй во всех! — пафосно ответил Арсений. — У меня денег на все стили хватит.
Источник вдохновения для особняка друзья встретили во время путешествия по Португалии. Там Арсений влюбился в замок Пена в Синтре в испано-мавританском стиле и решил построить такой же. Через три года особняк был готов. Здание с первых дней стало объектом для насмешек москвичей. Лев Толстой даже описал этот особняк в романе «Воскресение», как возведение «глупого ненужного дворца какому-то глупому ненужному человеку».
Мама Арсения, когда увидела законченный дом, в сердцах сказала: «Сеня, раньше одна я знала, что ты дурак, а теперь вся Москва будет знать». Арсений не парился. Стал устраивать в своём замке одну вечеринку за другой. На одной тусовке гостей встречало чучело медведя с подносом чёрной икры в лапах, на другой целый кавалерийский полк.
Однажды Арсений похвастался гостям, что благодаря медитациям больше не чувствует боль. На глазах собравшихся он выстрелил себе в ногу из пистолета. Весь вечер тусил, делая вид, что всё нормально. Друзья признали, что Арсений выиграл спор. Простреленная нога, томившаяся весь вечер в грязном сапоге привела к заражению крови. Через три дня Арсений умер в больнице.
По завещанию Арсения все деньги и сам особняк ушли его любовнице. Жену и детей он оставил с пустыми руками. Любовница Нина Коншина спокойно прожила в этом замке до 1917 года, пока её не выкинули оттуда большевики. После революции в доме Арсения Морозова открылся театр для рабочих. Сейчас здесь расположен дом приемов российского Правительства.