Para usar no dia a dia? Não acho necessário o blazer, uma camisa social já fica elegante. Eu vejo o blazer mais para uso em eventos ou um trabalho que exija uma vestimenta adequada para a ocasião.
O que mais vejo no meu dia a dia é gente de social. Acho comum.
Agora de uma forma informal, desse jeito que você disse, eu vejo às vezes.
Tem vezes que é bonito, outras não, depende muito da pessoa.