Это выражение употребляется (часто с неодобрительным оттенком) по отношению к людям чудаковатым, необычным, резко выделяющимся среди других. Восходит к 7-й сатире римского поэта Ювенала:
Рок дает царства рабам, доставляет пленным триумфы.
Впрочем, счастливец такой реже белой вороны бывает.