분포가 불균형할 때 로그함수 사용
478
작성한 질문수 2
안녕하세요. 강의 잘 듣고 있습니다.
책 p.348 에 보면
데이터 분포가 불균형 할 때 로그 함수를 사용하여 정규분포와 비슷하게 만들어주는 데이터 처리를 사용하고 있는데요.
책에서처럼 낮은 값에 데이터가 몰려서 로그 함수를 취하면 정규 분포 처럼 될 것 같습니다만,
만약 높은 값에 데이터가 몰린다면 로그 함수를 취한다면 효과가 없지 않나요?
이럴 경우에 대한 데이터 처리방법에 궁금증이 생겨 질문합니다. ㅎㅎ
감사합니다.
답변 1
0
안녕하십니까
네 맞습니다. 그래서 log 변환은 right skew(positive skew)일때 적용합니다.
일반적으로 비지니스 데이터는 right skew이기 쉽습니다. 반대인 left skew는 흔하진 않아서 해당 경우에는 변환을 잘하진 않지만 변환이 필요한 경우 아래와 같은 방법을 적용할 수 있습니다.
1. 제곱을 곱해서 변환합니다. 값이 너무 커지는 특성이 있어서 잘 적용하지는 않습니다.
2. 로그 변환을 이용하되 최대값에서 해당 값을 빼서 적용합니다. 즉 최대값이 K라고 한다면 log(K - X +1) 로 변환합니다.
감사합니다.
모델 서빙과 관련된 강좌가 출시되는지 질문드립니다.
0
52
2
안녕하세요 열심히 수강중인 학생입니다
0
89
2
정수 인덱싱
0
86
2
넘파이 오류
0
109
2
11강 numpy의 axis 축 질문 드립니다.
0
107
2
Kaggle 에서 Santander customer satisfaction data 를 다운로드 되지가 않습니다.
0
94
2
Feature importances 를 보여주는 barplot 이 그래프로 안보여져요.
0
77
2
타이타닉 csv 파일이 주피터 화면에 보이지 않습니다.
0
83
2
타이타닉 csv 파일이 주피터 화면에 보이지 않습니다.
0
73
2
5강 강의 오류가 있어요.
0
90
1
실무에서 LTV 관련 모델 선택 질문입니다!
0
81
2
14강 강의 듣는중에 궁금한게 있어서 질문합니다~
0
76
3
파이썬 다운그레이 후 사이킷런 재설치
0
129
2
좋은 강의 감사합니다.
0
80
2
scoring 함수 음수값
0
72
2
6번 강의에 사이킷런, 파이썬, 아나콘다 각각 버전 일치 안 시키고 진행해도 강의 따라가 지나요?
0
108
2
분류 평가 정확도 예측
0
87
2
안녕하세요. 강의 들으면서 업무에 적용하고 싶은 수강생입니다.
0
114
1
카카오톡 채널 있나요
0
118
1
혹시 강의에서 사용하시는 ppt 받을 수 있는건가요
0
193
2
pca 스케일링 관련하여 질문드립니다.
0
109
2
주피터 대신 구글 코랩
0
184
2
강의에서 사용하는 pdf or ppt자료는 따로 없는 건가요?
0
156
2
실루엣 스코어..
0
91
2