본문 바로가기
반응형

PROGRAMMING/Data Analysis8

[데이터 분석] (sumUP2) : 지도학습/비지도학습/데이터시각화 데이터 분석의 기초 (1) : 빅데이터 분석/데이터 수집/데이터 전처리 본 포스팅은 '데이터 분석' 의 기초 이론의 요약을 다룹니다. * 인공지능의 분류 머신러닝 내에 딥러닝/지도학습/비지도학습 이 존재. * 머신러닝 : 환경과의 상호작용을 통한 경험적 데이터를 기반 지식으로 모델을 자동으로 구축하고 스스로 성능을 향상하는 시스템. * 딥러닝 : 머신러닝 분류 중 신경망 네트워크 학습 모델. * 머신러닝의 분류 지도학습 비지도학습 주관 사람의 개입 컴퓨터의 기계학습 기법 확률과 통계 기반 추론 통계 패턴 분석 기반 데이터 마이닝 유형 회귀 분석, 분류 분석 군집 분석, 연관 분석 분야 인문, 사회 공학, 자연 반지도 학습 기계 학습의 한 범주, 목표값이 있는 데이터와 없는 데이터 모두 훈련에 사용 [1].. 2021. 10. 16.
[데이터 분석] (sumUP1) : 빅데이터 분석/데이터 수집/데이터 전처리 본 포스팅은 '데이터 분석' 의 기초 이론의 요약을 다룹니다. 다음 포스팅 : 데이터 분석의 기초 (2) : 지도학습/비지도학습/데이터시각화 (1) 빅데이터 분석 과제 정의 [1] 문제 정의와 분석 목표 선정 * 분석 목적 : 기존 통계 분석 방식으로 분석할 수 없는 것들을 분석. - 의사결정 : 여러 대안 중 하나의 행동을 고르는 정신적 지각 활동. 정보와 반응 사이의 단계. - 요약 : 현 상황을 빠르고 쉽게 파악해 대응을 생각 - 불확실성 해소 : 의사결정의 가장 큰 문제를 해소 - 예측 : 특정 패턴을 파악 - 인과관계 파악 : 데이터 간 연관관계로 세부적 판단을 내림 --> 과거의 데이터를 토대로 미래를 분석한다. *가트너 그룹 빅데이터 분석의 목적 (The Big Data Value Model.. 2021. 10. 16.
[데이터 분석] (3-1) 데이터 수집 예제 : 편의점 통계 데이터 Pandas 를 이용한 데이터 수집 안녕하세요! 지난 포스팅에서, 데이터 수집이 무엇인지, 어떤 절차를 거치는지 알아 보았습니다. [데이터 분석] (2) 데이터 수집하기 이번 글에서는 정형 데이터를 Pandas 를 이용해 분석하는 예제를 다룰게요! 말머리 [데이터 분석] 으로 검색해주세요! [데이터 분석] (sumUP1) : 빅데이터 분석/데이터 수집/데이터 전처리 [데이터 분석] (sumUP2) : 지도학습/비지도학습/데이터시각화 [데이터 분석] (응용)미디어 데이터분석 - 기초 이론 기본적으로 "." 으로 구분되는 CSV 파일이 데이터 분석에 이용될 예정입니다. * 분석 절차 1. 로컬 컴퓨터의 csv 파일 업로드하기 2. data 확인하기 3. data 기본 특성 및 통계량 확인하기 4. 조건에 맞.. 2021. 10. 15.
[데이터 분석] (3-2) 데이터 수집 예제 : 뉴스 웹크롤링 웹 크롤링 (Web Scrapping) 1. 웹사이트에서 원하는 정보를 추출 2. 일일이 데이터를 모으기 힘들기 때문에 필요한 소프트웨어 기술 안녕하세요! 지난 포스팅에서, 데이터 수집이 무엇인지, 어떤 절차를 거치는지 알아 보았습니다. 정형 데이터를 Pandas 를 이용해 분석하는 예제도 보았었습니다! [데이터 분석] (2) 데이터 수집하기 [데이터 분석] (3-1) 데이터 수집 예제 : 편의점 통계 데이터 이번 글에서는 비정형 데이터인 웹사이트의 데이터들을 수집하는 방법인, Crawling (Web Scrapping) 에 대한 예제를 다루겠습니다! 말머리 [데이터 분석] 으로 검색해주세요! [데이터 분석] (sumUP1) : 빅데이터 분석/데이터 수집/데이터 전처리 [데이터 분석] (sumUP2) :.. 2021. 10. 15.
반응형