На самом деле, не видел, чтобы слово "гаремник" применялось к сколько-нибудь серьёзной и далёкой от аниме и фанфиков литературе. Слово употребляется именно в среде авторов и потребителей такого вот контента. Можно, конечно, "хэдфанонно" расширять его на любую среду и любой контент, но, имхо, это неправильно.