Quando chamam alguém de "jovem", é insulto?

Isso me soa como insulto, meio que depreciativo. É isso mesmo?
tipo assim: "Ô jovem..."