Шаргей родился в семье Людмилы Шлиппенбах, происходившей из баронского рода (Священной Римской империи). Прадедом изобретателя по материнской линии был участник Отечественной войны 1812 года Антон Шлиппенбах.