Під час Великої Вітчизняної війни
З 1945 року голос Козина пропав з ефіру; пластинки не випускалися. Особливою нарадою при НКВС в 1944 році він був засуджений на 8 років за 121 статтею (за мужолозтво і спокушання малолітніх). Відбував покарання на Колимі. Був достроково звільнений в 1950 р - за зразкову поведінку і хорошу роботу. У довідці, виданій управлінням таборів, в графі «за якою статтею засуджено» був поставлений прочерк.
Біографи співака відзначають, що термін Козин відбував легко, до важких фізичних робіт не притягувався, працював в Магаданському музично-драматичному театрі поряд з іншими відомими артистами-ув'язненими Колималага. Табірне начальство високо цінувало відомого і улюбленого співака.
Повернення на сцену
У 1950-ті роки відновив концертну діяльність спочатку в Сибіру, а потім і в європейській частині СРСР, нарощуючи колишню популярність. Однак в 1959 році був вдруге засуджений за тією ж статтею. До кінця життя жив у Магадані, залишаючись своєрідною пам'яткою міста, людиною-легендою.
У 1960-х з'являються пісні «Не лякай мене гіркою долею» (А. Ахматова), «Лише чорний оксамит» (Н. Гумільов), «Не буди спогадів» (К. Бальмонт), «Йдуть білі сніги» (Є. Євтушенко ). У передвоєнні і воєнні роки у Козина було випущено більше 50 платівок в Грамплаттресту.
Після його смерті музичний салон був перетворений в меморіальний музей-квартиру.
Опис голосу і творчості
Голос Козина - теплий, м'якого тембру, вільно йде нагору, рухливий і переливається. Нагадує голос Сергія Лемешева, однак більш камерний, матовий і зі специфічним носовою призвуком. Спів Козіна в його кращі роки (1930-1940-ті роки) справляє дуже велике враження завдяки найточнішому інтонуванню, тонкому і проникливого прочувствованіе матеріалу пісні, високої музичної культури і пристрасності виконання. Козин - талановитий композитор-мелодист, його кращі пісні «Осінь», «Любушка» незмінно популярні і в наш час, їх виконують І. Кобзон, Н. Нікітський, Т. Кравцова та інші майстри естради. Козин - відомий популяризатор циганської табірних пісенної культури.
Меморіальний музей-квартира в Магадані
Сьогодні меморіальну квартиру і музичний салон, як і за життя Вадима Олексійовича, відвідують магаданци різних поколінь, приїжджі артисти і політичні діячі, іноземні гості міста. На концертах тут звучать пісні і романси у виконанні співака і його сучасників, експонується колекція живописних портретів співака, проходять літературно-музичні вечори і зустрічі учасників дискусійного клубу творчої і наукової інтелігенції «Хороший розмова», працює Громадська рада під керівництвом мера Магадана Володимира печені. Музей Вадима Козина дійсно затребуваний місцевим і російським спільнотою, є популярним туристичним об'єктом. Щорічно його відвідують близько 4-х тисяч чоловік.