본문 바로가기

빅데이터분석기사강의

(5)
[빅데이터분석기사_실기] 3. 결측치 처리/기출문제 풀이 안녕하세요, 여러분 :) 이제 드디어 기출 문제를 함께 풀어보겠습니다. 단, 꼭 앞 2개의 실습을 진행해보시고 넘어오시길 바랍니다. 꼭이요! ! ! 2021년 2회 실기 기출문제 풀이 [2021년 2회 실기 작업형 제 1유형 문제 12] 주어진 데이터의 첫 번째 행부터 순서대로 80%까지의 데이터를 훈련데이터로 추출 후 'total_bedrooms'변수의 결측값(NA)을 'total_bedrooms' 변수의 중앙값으로 대체하고 대체 전의 'total_bedrooms'변수 표준편차 값과 대체 후의 'total_bedrooms'변수 표준편차 값의 차이의 절댓값을 구하시오. 여러분이 이 문제를 풀기 위해서는 3가지를 알고 계셔야 합니다. 1) 데이터 추출 방법 2) 기초 함수 (중앙값, 표준편차, 절댓값) 3..
[빅데이터분석기사_실기] 2. 결측치 대체 안녕하세요, 여러분. 지난 시간 다뤄본 결측치 확인과 삭제 방법은 잘 보고 오셨죠? 이번에는 결측치를 대치하는 방법에 대해서 학습하겠습니다. 다음 시간 기출문제를 풀어보기 위해서 반드시 알아두셔야 합니다. 만약 R 기초를 아예 모르시는 분들은 블로그에 온라인 강의가 있으니 듣고 오시면 좋을 것 같습니다. :-) 1) 결측값 처리 방법 - 평균 대치법(Mean Imputation) 평균 대치법이란 결측값을 데이터의 평균, 중위수 등으로 대체하는 방법입니다. 대체하는 방법 중 가장 많이 쓰이는 방법입니다. 두 가지 방식으로 대치하겠습니다. 사용된 데이터는 R 내장 데이터인 airquality입니다. Ozone 변수와 Solar.R 변수에 각각 결측치가 있는 것을 확인할 수 있습니다. ifelse 조건문을 활..
[빅데이터분석기사_실기] 1. 결측치 처리 데이터 전처리에서 결측치를 확인하고 처리하는 과정은 기본 중 기본입니다. 빅데이터분석기사 실기 시험에 실제 결측치 처리(단순 대치법)문제가 나왔습니다. 공부해봅시다 ! ! :-) 1) 결측치란? -결측치는 관측되지 않은 값으로서 NA(Not Available)로 표시됩니다. -데이터에 결측치가 포함되어 있으면 산술연산과 같은 데이터 분석을 제대로 할 수 없습니다. 2) 결측치 데이터 처리 순서 (***) -결측치 확인 -결측치 처리 방법 결정 (삭제 or 대치) -결측치 삭제 -결측치 대체 결측치 처리 순서 잘 보셨나요? 이 순서대로 R로 학습하도록 하겠습니다. -필요한 데이터 세트 : airquality(내장 데이터) , 생성 데이터 -필요한 패키지 : dplyr 1. 결측치 확인 is.na(x) 데이..
[김민지_빅데이터강의] 울산시_과학기술 멘토와의 만남 특강 2021년 10월 27일 울산광역시에서 주최하는 과학기술 멘토와의 만남에 초대되어 ‘데이터 리터러시, 선택이 아닌 필수다.’ 라는 주제로 특강을 진행하였습니다. 제가 지금까지 진행 해온 강의 중 가장 많은 수강생이 있었습니다. 그래서 그만큼 긴장이 되었는데 몇 십명의 수강생분들이 호응도 너무 잘해주시고 채팅방에 댓글도 많이 달아주셔서 힘이 쑥쑥나고 재밌었습니다. ღ’ᴗ’ღ ! ! 지금 생각해도 기쁘고 뿌듯하네요. 우리가 살아가기 위해 열심히 한글을 배우고 의사소통능력을 기르듯이, 앞으로의 세상은 더더욱 자신이 무슨일을 하는지와는 무관하게 데이터 리터러시 능력을 가지고 살아가야합니다. 현실세계의 데이터를 제대로 인식하고, 또 스스로 현실 세계의 데이터를 정보화 시킬 수 있는 능력이 뒷받침 되어야 빅데이터 ..
[김민지_빅데이터강의]ADsP 자격증 온라인 강의 10월 넷째 주 스킬서포트와 각 대학 전산실 직원들을 대상으로 ADsP교육을 진행했습니다. 아침 9시반부터 5시반까지 진행되었고 4일동안 이론, 최신 기출문제까지 풀어보는 시간을 가졌는데요. 비록 온라인이었지만, 열심히 공부해주신 직원분들덕에 저도 뜻깊은 강의였습니다. 빅데이터관련 자격증은 일정부분 이론적으로 겹치는 부분이 많습니다. 한 번 잘 공부해두시면 ADsP자격증 뿐만 아니라 빅데이터분석기사를 취득하는데도 많은 도움을 받으실거에요 (ง ᵕᴗᵕ)ว 줄줄 외우고 문제만 많이 푸는 일회성 자격증 시험보다는, 통계와 빅데이터, 프로그래밍 언어까지 전반적인 학습의 이해를 높여 자격증 취득 이후에도 도움이 될 수 있는 교육을 지향합니다 ◡̈ 부디 제 의도와 방향이 잘 전달되어서 여러분 모두 좋은 결과를 얻으..