빅데이터 10일차 - 결측값 인식, 결측값 처리 방법

2020. 8. 3. 11:55·데이터과학/R
목차
  1. 결측값 인식
  2. 결측값 처리 방법
  3.  
  4. 1. 단순 대치법
  5. 2. 다중 대치법
728x90

결측값 인식

  • 결측값 자체의 의미가 있는 경우도 있다.
  • 결측값 처리는 전체 작업 속도에 많은 영향을 준다.
  • 결측값 처리 패키지 : Amelia, Mice, mistools
# 결측값 인식
x <- c(1,2,3,NA)
is.na(x)
mean(x)
mean(x,na.rm=T)

[그림1] 결측값 인식 예제 출력

 

결측값 처리 방법

 

1. 단순 대치법

  • completes analysis : 결측값이 존재하는 레코드를 삭제한다.
  • 평균대치법 : 관측 또는 실험을 통해 얻어진 데이터의 평균으로 대치
  • 비조건부 평균 대치법 : 평균으로 대치
  • 조건부 평균 대치법 : 회귀분석을 활용한 대치
  • 단순확률 대치법 : 평균대치법에서 추정량 표준 오차의 과소 추정문제를 보완하고자 고안된 방법(Hot-deck 방법, nearest neighboor 방법)

2. 다중 대치법

  • m번의 대치를 통해 m개의 가상적 완전 자료를 만드는 방법
  • 대치 -> 분석 -> 결합

 

출처 : 모두를 위한 R 데이터 분석 입문 한빛아카데미

728x90
저작자표시 비영리 변경금지
  1. 결측값 인식
  2. 결측값 처리 방법
  3.  
  4. 1. 단순 대치법
  5. 2. 다중 대치법
'데이터과학/R' 카테고리의 다른 글
  • 빅데이터 10일차 - 머신러닝, 데이터 마이닝, 군집화, 분류,지도학습 비지도학습
  • 빅데이터 10일차 - 이상값(Outlier)인식 방법, 극단값 절단 방법
  • 빅데이터 10일차 - 데이터 테이블, 데이터 EDA(탐색적 데이터 자료 분석)
  • 빅데이터 10일차 - sqldf,plyr 이용한 데이터 분석
포장빵
포장빵
IT공부 및 프로그래밍
  • 포장빵
    포장빵의 IT
    포장빵
  • 전체
    오늘
    어제
    • AI 학습 노트 (113)
      • 기초 수학 (4)
        • 선형대수 (0)
        • 확률통계 (4)
        • 미적분 (0)
        • 최적화 이론 (0)
      • AI & 딥러닝 (1)
        • 이론 (0)
        • 컴퓨터 비전 (0)
        • 자연어 처리 (0)
        • 생성AI (0)
        • 강화학습 (0)
      • 데이터과학 (70)
        • R (47)
        • ADSP (21)
      • 연구 & 자료 (15)
        • 논문 (6)
        • 수료증 (3)
      • 프로그래밍 & 개발 환경 (22)
        • Python (22)
        • 개발도구 (0)
        • 알고리즘 (0)
      • 면접 자료 (1)
  • 블로그 메뉴

    • 링크

    • 공지사항

    • 인기 글

    • 태그

      단순선형 회귀분석
      R 원 그래프 퍼센트
      yolov9
      str lib
      자료의 종류
      CV
      Coursera 1
      k-평균 군집
      지수분포
      매핑형(딕셔너리)
      Coursera Python Data Structures
      R 원 그래프
      통계량에 의한 자료 분석
      확률 분포
      stylegan2
      python 주요 데이터 타입
      베르누이분포
      주성분 분석(PCA)
      k-means clustering
      다차원 척보법
      none타입
      Python 크롤링 기초
      Python Regular Expression Quick Guide
      R 도수분포표
      논문
      확률
      시퀀스형
      yolov10
      상관분석
      시계열 모형
    • 최근 댓글

    • 최근 글

    • hELLO· Designed By정상우.v4.10.3
    포장빵
    빅데이터 10일차 - 결측값 인식, 결측값 처리 방법

    개인정보

    • 티스토리 홈
    • 포럼
    • 로그인
    상단으로

    티스토리툴바

    단축키

    내 블로그

    내 블로그 - 관리자 홈 전환
    Q
    Q
    새 글 쓰기
    W
    W

    블로그 게시글

    글 수정 (권한 있는 경우)
    E
    E
    댓글 영역으로 이동
    C
    C

    모든 영역

    이 페이지의 URL 복사
    S
    S
    맨 위로 이동
    T
    T
    티스토리 홈 이동
    H
    H
    단축키 안내
    Shift + /
    ⇧ + /

    * 단축키는 한글/영문 대소문자로 이용 가능하며, 티스토리 기본 도메인에서만 동작합니다.