df["시도"].unique()

Question

안녕하세요 선생님! 신규 데이터로 강의를 수강하고 있는데 전처리해야 할 부분이 많더라구요! 특히, df["시도"].unique 값이 아래와 같이 많이 있습니다. array(['대구광역시', '경상남도', '부산광역시', '충청남도', '경기도', '경상북도', '전라북도', '전라남도', '광주광역시', '인천광역시', '서울특별시', '울산광역시', '대전광역시', '충청북도', '-', '강원도', '제주특별자치도', '세종특별자치시', '경남', '덕릉로', '화랑로51나길', '누원로', '덕릉로112길', '서울', '동일로184길', '노원로1길', '화랑로', '석계로8가길', '석계로', '월계로45길', '중계로', '한글비석로19길', '동일로242길', '동일로242라길', '덕릉로71길', '노원로26길', '상계로10길', '노원로', '한글비석로24다길', '상계2동', '한글비석로31가길', '섬밭로', '우이천로2길', '우이천로', '중계로12길', '중계로14라길', '한글비석로39길', '한글비석로46가길', '동일로204길', '동일로239나길', '공릉로34길', '화랑로51길', '상계로37라길', '초안산로2라길', '월계로42길', '공릉로', '동일로', '한글비석로', '한글', '중계로6길', '노해로', '동일로191가길', '한글비석로36길', '광운로19길', '초안산로5길', '월계로45가길', '동일로245길', '동일로250길', '덕릉로118길', '상계'], dtype=object) 전처리해야 할 양이 많아 함수를 사용해보고자 하였으나, 도저히 좋은 방법이 떠오르지 않아 질문드립니다. 간단하게 표현해 볼 수 있는 방안이 있을까요?

박조은 · Answer

안녕하세요. 텍스트 데이터 전처리가 가장 까다롭고 시간이 오래 걸리는 편입니다. 도로명주소나 지번주소에서 시도명이나 시군구명을 추출해 보고 값을 비교, 정제해 보는 것도 방법일 수 있습니다.