우당탕탕 데이터 사이언스 정복기

데이터 전처리 수집한 데이터를 바로 분석할 수 없기 때문에 데이터를 정제해야함 > 가장 오래걸리는 과정 데이터 분석을 시작하기 전, 분석 과정에서 오류를 일으킬 수 있는 요인을 미리 찾아야 함 - 결측값 - 잡음/ 이상값 결측값 - 데이터 값이 존재하지 않는 것을 의미한다. > 실수로 누락하거나 필요하지 않아서 없을 수 있음 완전 무작위 결측(MCAR) - 다른 변수와 무관하게 무작위로 발생 무작위 결측(MAR) - 결과 분포 자체에 영향을 미치지 않음 비무작위 결측(NMAR) - 결측값이 결과에 영향을 미치는 경우 결측값의 처리 삭제 - 특정 단일값 - 목록 대체 - 특정값 대체 (특정 대푯값으로 대체) - 다중 대치법 (통계 및 추정을 통해 새로운 데이터 셋을 대체) 잡음/ 이상값 둘 다 동일한 데이..

데이터 플랫폼 이론(2) 2) 빅데이터 관리 플랫폼 빅데이터를 이용하기 전, 기획을 잘해야한다. 해결하고자 하는 문제 분석 방법 문제 파악과 해결방법 분석 대상을 알고 있음 분석 방법을 알고 있음 최적화 Optimization 솔루션 solution 분석 방법을 모르고 있음 통찰 Insight 발견 Discovery 분석 대상을 모르고 있음 무엇을 알고 무엇을 모르는가 가용 데이터 - 가용 데이터에 대한 유형 파악 적절한 활용 방안과 유즈 케이스 - 기존에 만들어진 사례 및 솔루션을 최대한 활용 사전 계획 수립 - 장애 요소에 대한 사전 계획 수립 하향식 접근 - 분석 대상을 알 때 문제 탐색 단계 문제 정의 단계 해결방안 탐색 단계 타당성 검토 단계 상향식 접근 - 분석 대상을 모를 때 지도/비지도 학..

HTML5 문서를 선언하는 구문 생략가능, 하위 호환성을 위해 작성 권장 ~ HTML5 문서의 시작과 종료 언어 속성을 사용하여 주된 언어 값 설정 가능 웹 페이지의 정보를 정의 태그와 javascript, 스타일시트 등을 정의 ~ HTML5 문서의 본문을 작성 HTML5 문서의 작성 규칙 태그 이름은 대소문자를 구분하지 않음 > 따라서 소문자로 작성할 것을 권장 본문 내 연속된 공백이나 줄 바꿈은 하나의 공백으로 처리 > 엔터, 탭, 스페이스바 대신 특수 문자를 사용 권장 태그의 포함 관계를 표현하기 위해 들여쓰기 적용 > 문서의 구조를 명확하게 작성(들여쓰기 및 줄 바꿈) 주석은

데이터 플랫폼 이론 1) 데이터 플랫폼의 이해 Plat = form = Plaform 승장장을 예로 듦: 효율적으로 타고 내릴 수 있는 것 즉, 데이터의 수집/저장/처리/관리 및 분석 등의 역할 수행을 지원 빅데이터 관리 플랫폼 데이터 수집/저장/처리/관리 빅데이터 분석 플랫폼 데이터 분석 컴퓨터에서 플랫폼의 종류 하드웨어 플랫폼 (IBM / ARM) - 핵심 동작 부분들이 똑같이 동작하도록 함 운영체제 플랫폼 (iOS / Android) - 같은 운영체제 내에서는 쉽게 정보를 옮길 수 있음 - 단, 운영체제가 다르면 하드웨어도 다르기 때문에 설치는 가능하나 가용성이 낮아짐 소프트웨어 플랫폼 (MS Office / 한컴) 크로스 플랫폼 빅데이터와 데이터의 차이점 Volume(크기) Variety(다양성)..

"열정없이 사느니 차라리 죽는게 낫다." - 커트 코베인 - 무언가를 새롭게 시작하게 된다면, 설렘과 불안이 동시에 수반됩니다. 하지만 두려움에 맞서는 용기와 확고한 다짐이 있다면 설렘은 안고 불안은 떨쳐내버릴 수 있습니다. 4학년이 될때까지, 대학생활 내내 해오던 아르바이트를 그만두었습니다. 제 인생 마지막 방학을 의미있게 보내기 위해서 무엇이 좋을 지 고민하다가 평소 친하게 지내는 지인들을 통해 '데이터 청년 캠퍼스'를 추천 받았습니다. 제 목표를 향해 좋은 방향으로 이끌어 줄 수 있는 활동이기 때문에 너무나도 좋은 활동이라 생각이 들어, 적극적인 자세로 지원신청을 했습니다! 1. 데이터 청년 캠퍼스란? 데이터 청년인재 양성 사업은 빅데이터 기술을 선도하는 국내 최고의 대학이 기업 수요에 부응하는 실..