[Harv']

Si, ça peut complètement desservir.
Question d'adaptation au milieu où tu te trouves.

Tu risques de passer pour pédant / prétentieux / coincé si tu utilises des mots volontairement compliqués dans un contexte qui ne s'y prête pas. Le but du langage c'est la communication, si l'autre ne te comprend pas ou ne te suit pas, c'est un échec.
Par exemple les tournures de phrases compliquées à l'écrit ça passe beaucoup mieux qu'à l'oral, il faut le savoir.

Tu connais l'adage sur la culture et la confiture, c'est souvent pareil pour le vocabulaire.
Mais je te rejoins sur le fait que "qui peut le plus peut le moins", il vaut mieux avoir le vocabulaire quitte à choisir de ne pas l'utiliser plutôt que ne pas l'avoir du tout. Mais ce n'est pas pour ça que tu dois l'utiliser en toute situation.