Cmentarz parafialny w Milówce znajduje się na malowniczym, częściowo zadrzewionym pagórku, pół kilometra za kościołem parafialnym Wniebowzięcia NMP.

Nekropolia jest zapewne tak samo wiekowa, jak parafia, której początki sięgają pierwszej połowy XVII wieku. Na cmentarzu grzebano niegdyś wiernych także z Rajczy i Ujsół oraz pozostałych, okolicznych miejscowości.

Pierwotnie odbywającym się tutaj ceremoniom służyła drewniana kaplica cmentarna. W połowie XIX zbudowano istniejącą do dziś kaplicę murowaną pod wezwaniem św. Marii Magdaleny. Od ponad stu lat odprawia się w niej Msze św. także z okazji liturgicznego wspomnienia patronki.