Preševska Oraovica već dugo je u literaturi poistovećena sa srednjovekovnim selom Arhiljevica, često i različitim povodima pominjanim u istorijskim izvorima. Iznesena je takođe pretpostavka da je crkva posvećena Svetom velikomučeniku Georgiju podignuta na mestu crkve Presvete Bogorodice iz XIV veka.

Sazidana je u vreme kada su ovim krajevima upravljali Dejanovići.

Crkva je pod zaštitom Zavoda za zaštitu spomenika kulture Republike Srbije.

1989. godine renovirani su crkva, zvonik i crkvena zgrada.

U neposrednoj blizini crkve nalazi se i groblje, na kome su polomljeni svi nadgrobni spomenici od strane Albanaca, koji su u potpunosti uzurpirali i manastirsko imanje površine oko 30 hektara. Poslednji stanovnik ovog sela srpske nacionalnosti umro je 1996. godine i od tada ovo selo naseljavaju isključivo Albanci. (eparhijavranjska.org)