Не забывайте, что европейски образованные - или хотя бы претендующие на это - балтийские дворяне (ну и прослойка обеспеченных горожан) играли при этом немалую роль в управлении той самой РИ (офицеры, чиновники, управляющие...). То есть, РИ оттягивала себе управленческий ресурс - иначе, может, территории не были бы "нищими".