В июне 2004 года, в Москве, «Элизиум» провёл собственный рок-фестиваль «Панк-романтика», впоследствии ставший ежегодным. 24 июля группа выступила на одном из главных рок-фестивалей страны — «Крылья», проведённом в московском стадионе «Лужники».

«На окраинах Вселенной» и участие Риммы Черникевич (2005—2006)

Весной 2005 года Элизиум закончил запись нового студийного альбома. Отыграв концерты в апреле и мае, музыканты решили провести лето вне группы. Одновременно с этим, бэк-вокалистка Ксения Сидорина вышла из состава Элизиума. По общему мнению её и остальных участников, к этому времени Ксения далеко продвинулась в собственных сольных проектах, и участие в Элизиуме не могло позволить ей развиваться дальше. Впоследствии, она появлялась на сцене вместе с группой в качестве приглашённого гостя, а также ещё до ухода приняла участие в записи многих песен из нового альбома. Альбом «На окраинах Вселенной», который группа назвала своей самой серьёзной работой, вышел осенью 2005 года и значительно отличался от предыдущих работ группы: по сравнению с романтическим настроем альбомов «Все острова!» и «Космос», большинство песен «На окраинах Вселенной» объединяла лирическая, мрачная тематика. «Альбом „На окраинах Вселенной“ и, во многом, смена музыкальных приоритетов — естественное развитие, я сказал бы, естественный процесс взросления группы. Правда, совершенно не факт, что вы услышите ещё один подобный альбом от „Элизиума“» (Дмитрий Кузнецов).

Этой же осенью «Элизиум» нашёл себе новую бэк-вокалистку: место Ксении Сидориной заняла Римма Черникевич, приехавшая в Москву из Курска. В Курске Римма уже в 14 лет серьёзно занималась рок-музыкой, предпочитая её учёбе в фармацевтическом колледже, и успела перебывать участницей нескольких коллективов. Девушка понравилась «Элизиуму» при первом же прослушивании: «По сравнению с ней все наши предыдущие вокалистки не пели вообще. Когда мы услышали Римму, были в легком таком шоке. И сразу после одной восьмичасовой репетиции мы вытащили её на концерт-презентацию в „Точке“». После участия в ряде выступлений, Римма была принята в состав, и уже в составе «Элизиума» появилась на концерте, посвящённом десятилетию группы. Принять участие в концерте были также приглашены бывшие участники Элизиума — вокалист Дмитрий Данилин, гитаристы Алекс Репьёв и Сергей Сухонин и тромбонист Сергей Тремасов.

Участие Риммы Черникевич в «Элизиуме», однако, длилось меньше года; с её вокалом было выпущено лишь две студийных записи — песня «Эх, дороги», появившаяся на сборнике, и версия песни «Слёзы-зеркала» с заменой вокала Ксении Сидориной. Летом 2006 года Черникевич покинула группу, так как готовилась к поступлению в Российскую академию музыки имени Гнесиных, а позже уехала жить в Испанию.

Тематика социальных проблем в песнях (2007—2009)

В 2007 году «Элизиум» стал первой российской группой, выступившей на одной сцене с калифорнийским панк-коллективом NOFX, одним из её любимых исполнителей. На концертах в конце августа в питерском клубе «Порт» и московском «Б1 Maximum», «Элизиум» играл на разогреве у NOFX на пару с другой американской командой Mad Caddies.

2007 год стал для «Элизиума» началом нового творческого периода. Изменив музыкальный стиль и тексты песен ещё больше, чем с альбомом «На окраинах Вселенной», группа посвятила своё творчество теме социальных проблем. Впервые группа проявила себя в этом, исполнив на концерте песню «Сколько стоишь ты?», а осенью «Элизиум» выпустил макси-сингл «Дети-мишени/Дети-убийцы» с пятью новыми композициями, связанными с проблемами общественной нравственности, войны и экологии. В 2008 году группа также выпустила интернет-сингл «Diane», кавер-версию песни группы Therapy?, связанную с темой изнасилования.