В обливионе тяжелая броня вроде бы меняла успех каста заклинания, но тут ничего такого нет. Зачаруй доспех на восстановление магии (или на уменьшение стоимости заклинаний) и развлекайся, как хочешь.
Ставь Скайрим Редон, там ветки прокачек изменены и позволяют эффективно использовать систему боя заклинание+холодное оружие. Получаем в итоге мага-милишника.