"Мой человек" отдает фильмами про мафиози. Что-то такое типа "Мой человек придет за деньгами"
"Свой человек" - более широкое понятие, больше о доверии и принадлежности к определенному кругу