Nice это в том числе и приятной внешности, да. Сколько помню, так было)
Handsome не только про мужскую. Но обычно если говоришь так про женщин, подразумевается "an attractive face with strong and regular features"