И в самом деле, мне явственно слышится в этом слове отрицательный оттенок, или иронично-неодобрительный.

А вот если не к человеку, а к зверью слово применяется, тады намана, верно замечено.

,,,

Есть ещё хуже словечко: "Лощёный".