▶ 이 책은 자료분석/빅데이터를 다룬 이론서입니다. 자료분석/빅데이터의 기초적이고 전반적인 내용을 학습할 수 있습니다.
Chapter 01 빅데이터를 지배하는 통계학 11
♣ 통계학자가 되려는 10가지 이유 / 12
1.1 빅데이터 13
1.2 빅데이터 통계분석 17
1.3 빅데이터를 지배하는 통계학 19
1.4 빅데이터를 분석하는 소프트웨어 21
♣ 참고문헌 / 26
Chapter 02 엑셀을 이용한 통계량 계산 및 그래프 작성 27
♣ 그리스 알파벳 / 28
2.1 데이터 세트 설정과 함수변환 29
2.2 외부 데이터 불러오기와 데이터 변형 35
(1) 텍스트 파일 불러오기 35
(2) 행/열 바꾸기 37
2.3 기술통계량 구하기 39
2.4 피벗 테이블 작성 44
2.5 분할표와 그래프 작성 47
(1) 히스토그램 47
(2) 파이차트 49
(3) 꺾은선 그래프 52
(4) 상자 수염 그림 53
2.6 자료다운방법 55
(1) 마이크로데이터 통합서비스 55
(2) 교통사고분석시스템 56
(3) 공공데이터포털 57
♣ 추가분석과제 / 59
Chapter 03 빅데이터 요약과 통계 분석: 분할표와 그래프 작성 61
3.1 타이태닉호 사망자 자료 분석 63
(1) 데이터 변환 63
(2) 피벗 테이블 만들기 65
(3) 피벗 테이블을 이용하여 히스토그램 작성 67
(4) 피벗 테이블을 이용하여 파이차트 작성 69
♣ 추가 분...석 과제 / 73
3.2 지하철 4호선 자료 분석 74
(1) 요일별 승차인원 자료 분석 76
(2) 요일별 승차인원 자료요약과 그림 작성 78
(3) 평일과 주말의 승차인원 자료 분석과 그림 작성 80
(4) 시간대별 승차인원 자료분석과 그림 작성 81
(5) 승하차 인원 상ㆍ하위 다섯 개 역 비교 분석 85
(5.1) 지하철 4호선의 각 역별 승하차 인원 합계 데이터 설정 85
(5.2) 지하철 4호선의 각 역별 승하차 인원 합계 데이터 분석 86
♣ 추가 분석 과제 / 88
3.3 교통사고 자료 분석 89
(1) 요일별 교통사고건수 비교 89
(2) 시간대별 교통사고건수 비교 94
(3) 요일별 시간대별 사고건수대비 사망률 비교 96
(4) 가해운전자 차종별 시간대별 사고건수대비 사망률 비교 98
(5) 계절별 교통사고건수 및 사고건수대비 사망률 비교 101
(6) 시도별 교통사고건수 및 사망자수 비교 102
(6.1) 시도별 인구 10만 명당 교통사고건수 및 사망자 비교 103
(6.2) 시도별 자동차 1만 대당 교통사고건수 및 사망자 비교 104
♣ 추가 분석 과제 / 106
Chapter 04 확률분포함수 109
4.1 이산형 확률분포 111
(1) 이항분포 111
(2) 포아송분포 116
4.2 연속형 확률분포 125
(1) 정규분포 125
(2) 지수분포 132
4.3 확률분포들간의 관계 137
(1) 이항분포와 포아송분포의 관계 137
(2) 이항분포의 정규 근사 139
♣ 추가 분석 과제 / 142
Chapter 05 확률모의실험 145
5.1 난수 추출 148
(1) 균일분포 148
(2) 이항분포 158
(3) 정규분포 159
5.2 표본추출방법: 단순무작위추출법 163
♣ 추가 분석 과제 / 164
Chapter 06 빅데이터분석을 위한 통계방법1: 상관분석과 회귀분석 165
6.0 상관분석과 회귀분석 설명 167
(1) 상관분석 167
♣ 추가 분석 과제 / 178
(2) 회귀분석 180
♣ 추가 분석 과제 / 190
6.1 도시별 복지기능 특성자료 191
(1) 데이터 설명 191
(2) 변수간 상관분석을 통한 관계 파악 191
(3) 변수간 산점도를 통한 관계 파악 194
6.2 국내 상위기업 재무자료 199
(1) 데이터 설명 199
(2) 변수간 상관분석을 통한 관계 파악 200
(3) 변수간 산점도를 통한 관계 파악 200
6.3 도시별 사회경제적 현상 203
(1) 데이터 설명 203
(2) 변수간 상관분석을 통한 관계 파악 204
(3) 변수간 산점도를 통한 관계 파악 204
6.4 남자 국제 육상 기록 207
(1) 데이터 설명 207
(2) 변수간 상관분석을 통한 관계 파악 208
(3) 단거리 평균과 장거리 평균의 산점도를 통한 관계 파악 208
6.5 미국 50개 주의 폭행 체포와 살인 체포 212
(1) 데이터 설명 212
(2) 변수간 상관분석을 통한 관계 파악 213
(3) 변수간 산점도를 통한 관계 파악 213
♣ 추가 분석 과제 / 215
Chapter 07 빅데이터분석을 위한 통계방법2: 인자분석, 주성분분석, 군집분석 221
7.0 주성분분석, 인자분석, 군집분석 설명 223
(1) 주성분분석 223
(2) 인자분석 224
(3) 군집분석 225
♣ 추가 분석 과제 / 232
7.1 도시별 복지기능 특성자료 233
(1) 데이터 설명 233
(2) 변수간 상관분석을 통한 관계 파악 233
(3) 데이터 표준화와 상관분석 235
(4) 사회복지기능 평균과 문화시설의 산점도 238
7.2 국내 상위기업 재무자료 242
(1) 데이터 설명 242
(2) 그룹별 변수간 상관분석을 통한 관계 파악 242
(2.1) SK그룹 242
(2.2) 삼성그룹 244
(2.3) 현대그룹 245
(3) 전체 변수 간 상관분석을 통한 관계 파악 247
(4) 주식(Capital_stock) 변수와 재무 평균 변수의 산점도 247
7.3 도시별 사회경제적 현상 251
(1) 데이터 설명 251
(2) 변수간 상관분석을 통한 관계 파악 251
(3) 평균주택가격과 그 외 사회현상에 대한 산점도 252
7.4 미국 50개 주의 폭행 체포와 살인 체포 254
(1) 데이터 설명 254
(2) 변수간 상관분석을 통한 관계 파악 254
(3) 살인체포와 강간체포의 산점도 255
7.5 파산한 기업과 건실한 기업의 재무조사 257
(1) 데이터 설명 257
(2) 변수간 상관분석을 통한 관계 파악 258
(3) 기업 자산 평균과 유동자산/순매출에 대한 산점도 258
7.6 성적에 따른 대학원 입학여부 261
(1) 데이터 설명 261
(2) GPA와 GMAT에 대한 산점도 261
♣ 추가 분석 과제 / 263
찾아보기 / 266
저자소개 / 271
[머리말]
컴퓨터사이언스 전공자들로부터 데이터베이스, 데이터웨어하우스, 데이터마이닝 등 현란한 용어가 계속 등장하고 꾸준히 진화하면서 발전하고 있다. 통계학도 컴퓨터사이언스와 동반적으로 발전하고 있는데 인공지능(AI), 사물인터넷(IoT) 등과 함께 특히, 요즘 커다란 이슈인 ‘빅데이터(Big Data)’의 등장으로 통계학은 비약적으로 발전하고 있음을 실감한다.
평생을 학교에서 강의와 연구만 해서 학교 밖의 사회 현실에 대하여 둔감하지만, 대학교 1, 2학년의 학부생들이 전공을 선택할 때 통계학을 선호하는 현상이 증가하고 있으며, 통계학 학위를 가진 학부 졸업생들의 취업이 매우 잘 되며 좋은 직장에 있는 상황이며, 통계학을 전공하려고 대학원 석사와 박사과정에 진학하는 대학원생들의 수가 증가하는 추세이며, 그리고 각 대학교에서 통계학 박사를 교수로 초빙하려는 모집 공고가 타 전공에 비해 비역적으로 많은 상황 등을 살펴보면, 요즘 통계학의 인기는 그 어떤 시기보다 좋다는 것을 절실하게 느낄 수 있다. 한마디로 표현하면 (과장되었다고 볼 수도 있지만),
통계학의 르네상스 시대가 시작하였다.
라고 감히 얘기할 수 있다. 르네상스 시대이다가 아니라 르네상스 시대가 시작하였고 계속 발전하고 있는 상태라는 의미이다.
빅데이터에서 중요한 것은 데이터 관리와 분석이라고 할 수 있는데, 특히 통계학의 사용이 절대적으로 필요한 빅데이터 분석에 대하여 살펴보자. 빅데이터 분석을 하기 위해서는 용량이 큰 데이터를 처리할 수 있는 고가의 슈퍼 컴퓨터를 연상하기 쉽다. 슈퍼 컴퓨터에 대하여도 빅데이터 만큼이나 쉽게 정의하기 어려워 이에 대하여는 본서의 제1장에 서술하였지만, 중요한 점은 제1세대의 슈터 컴퓨터는 현재 여러분의 손에 있는 핸드폰의 기능보다도 떨어진다는 점이다. 아무튼 일반적인 슈퍼 컴퓨터를 사용하지 않고 여러분이 사용하고 있는 개인 컴퓨터를 사용하여도 용량이 큰 데이터를 분석해보면 상식적으로 알고 있는 지식과 일치하는 결과를 얻을 수 없는 경우가 많이 발생한다. 심지어 특정한 현상과 추세 등을 파악하기는 더욱 어렵다. 따라서 빅데이터 분석에서의 통계학의 역할은 더욱 중요하다.
통계학을 활용하여 빅데이터 분석하기 위해서는 대용량 자료를 한꺼번에 사용하는 것보다 빅데이터 자료를 우선 다양하게 분할하고, 분할된 자료를 통계적으로 분석하여 결과를 해석하여야 한다. 그리고 얻은 결과들 중에서 동일하게 해석할 수 있는 자료의 성격을 파악하여 유사한 특성을 가진 분할된 자료를 통합하면서 빅데이터 자료분석을 진행해 나가야 하는 점이 중요하다. 즉 대용량 자료인 빅데이터 자료를 다양하게 분할하여 분석하고 얻은 결과를 해석하여야 하고, 유사하게 해석할 수 있는 분할된 자료를 통합하면서 특성을 파악하는 과정을 반복하면 분석을 진행하여야 한다. 이런 과정 중에서 제일 중요한 것인 ‘통계자료분석’이라고 할 수 있다. 그러므로 빅데이터 분석의 핵심인 통계학의 중요성은 강조하고 다시 강조해도 지나치지 않다.
성균관대학교 학부대학에서 ‘통계적 사고’ 그리고 ‘생활 속의 통계’라는 과목으로 강좌가 오랫동안 유지되어 왔었다. 그러나 2020년도부터 두 과목을 폐지하고 새로운 시대에 맞춰 ‘빅데이터와 통계학’ 이란 하나의 강좌를 학부대학에서 새롭게 개설한다. 이 과목과 강의를 위해 본서를 집필하였다.
본서에서는 빅데이터 분석에 역점을 두지만, 빅데이터를 처리할 수 있는 고가의 슈퍼컴퓨터를 사용하지 않는다. 오히려 학부생들이 집에서 보유하고 있는 가장 일반적인 개인 컴퓨터 사용을 ...기반으로 한다. 그리고 비싼 사용료를 지불해야 하는 통계소프트웨어를 사용하지 않고 가장 일반적인 개인 컴퓨터에 내장되어 있거나 따로 사용료를 지불하지 않아도 되는 마이크로 엑셀을 사용하면서 학습하는 것을 목표로 한다.
다시 이야기 하면, 빅데이터 분석이라고 하면 빅데이터를 관리할 수 있는 슈퍼컴퓨터 급의 컴퓨터를 가까이 사용할 수 있는 분(학생)이거나 빅데이터의 관리를 원활하게 취급할 줄 수 있는 높은 수준의 컴퓨터에 관한 지식이 필요로 하거나, 빅데이터를 분석하기 위한 고가의 통계 소프트웨어의 사용법을 매우 잘 아는 분(학생)이 아니라도, 누구나 갖고 있는 평범한 개인 컴퓨터를 사용하여 그 개인 컴퓨터에 내장되어있는 소프트웨어를 사용하여 빅데이터를 통계 분석하는 방법을 쉽게 이해하고 숙지하고 배우기 위하여 교재를 개발한다.
통계자료분석에 대하여는 어떻게 분석하고 해석하느냐에 따라 설명이 다르기 때문에 정답은 없다.
‘통계자료분석은 요리와 같다’
라고 주장한다. 주어진 재료가 똑같다 하더라도 요리사가 누구며 요리 방법에 따라 음식의 맛은 천지 차이가 나는 이치이다. 인스턴트 식품의 대명사인 라면, 그 중에서도 특정한 라면 하나를 예로 들어 설명한다. 누구나 쉽게 끓일 수 있는 라면도 누가 어떻게 하느냐에 따라 즉, 물과 불의 조절에 따라 맛의 혁혁한 차이를 누구나 느낄 수 있다. 심지어 같은 요리를 만들기 위하여 다양한 재료를 어떤 순서의 조합으로 어떻게 조리하느냐에 따라 음식 맛은 천지 차이가 난다는 것을 잘 알고 있을 것이다.
자료분석도 마찬가지이다. 그렇기 때문에 정확한 통계학적 이론과 지식을 바탕으로 자료를 다양한 분석 방법을 활용하여 분석해 보는 풍부한 경험이 제일 중요하다. 그러므로 독자는 시간이 허락하는 범위에서 본서를 기초로 공부한 다음에 여러 종류의 자료를 통계적으로 분석하는 다양한 방법을 배우고 토론하여 자료분석하는 능력을 발전시키기 바란다.
마지막으로 본서의 집필을 도와준 신혜수, 전해선, 홍성혁, 최소연 제자에게 고마움을 전하고, 탐진 출판사 최재범 사장님과 최효진 상무님께 감사드립니다.
2020. 2.
북악산 기슭 平散齋에서
홍종선 [저]
전체 0개의 구매후기가 있습니다.
인터파크도서는 고객님의 단순 변심에 의한 교환과 반품에 드는 비용은 고객님이 지불케 됩니다.
단, 상품이나 서비스 자체의 하자로 인한 교환 및 반품은 무료로 반품 됩니다.
교환 및 반품이 가능한 경우
상품을 공급 받은 날로부터 7일이내 가능 공급받으신 상품의 내용이 표시, 광고 내용과 다르거나 다르게 이행된 경우에는 공급받은 날로부터 3개월 이내, 혹은 그사실을 알게 된 날 또는 알 수 있었던 날로부터 30일 이내 상품에 아무런 하자가 없는 경우 소비자의 고객변심에 의한 교환은 상품의 포장상태 등이 전혀 손상되지 않은 경우에 한하여 가능
교환 및 반품이 불가능한 경우
구매확정 이후(오픈마켓상품에 한함) 고객님의 책임 있는 사유로 상품 등이 멸실 또는 훼손된 경우
(단, 상품의 내용을 확인하기 위하여 포장 등을 훼손한 경우는 제외) 시간이 지남에 따라 재판매가 곤란할 정도로 물품의 가치가 떨어진 경우 포장 개봉되어 상품 가치가 훼손된 경우
다배송지의 경우 반품 환불
다배송지의 경우 다른 지역의 반품을 동시에 진행할 수 없습니다. 1개 지역의 반품이 완료된 후 다른 지역 반품을 진행할 수 있으므로, 이점 양해해 주시기 바랍니다.
중고상품의 교환
중고상품은 제한된 재고 내에서 판매가 이루어지므로, 교환은 불가능합니다.
오픈마켓 상품의 환불
오픈마켓상품에 대한 책임은 원칙적으로 업체에게 있으므로, 교환/반품 접수시 반드시 판매자와 협의 후 반품 접수를 하셔야하며, 반품접수 없이 반송하거나, 우편으로 보낼 경우 상품 확인이 어려워 환불이 불가능할 수 있으니 유의하시기 바랍니다.
배송예정일 안내
인터파크 도서는 모든 상품에 대해 배송완료예정일을 웹사이트에 표시하고 있습니다.
<인터파크 직배송 상품>
상품은 월~토요일 오전 10시 이전 주문분에 대하여 당일 출고/당일 배송완료를 보장하는 상품입니다.
상품은 서울지역/평일 주문분은 당일 출고/익일 배송완료를 보장하며, 서울외지역/평일 주문분의 경우는 오후 6시까지 주문분에 대하여 익일 배송완료를 보장하는 상품입니다. (단, 월요일은 12시까지 주문에 한함)
상품은, 입고예정일(제품출시일)+택배사배송일(1일)에 배송완료를 보장합니다.
~
상품은 유통특성상 인터파크에서 재고를 보유하지 않은 상품으로 주문일+기준출고일+택배사배송일(1일)에 배송완료를 보장합니다.(토/공휴일은 배송기간에 포함되지 않습니다.) ※기준출고일:인터파크가 상품을 수급하여 물류창고에서 포장/출고하기까지 소요되는 시간
<업체 직접배송/오픈마켓 상품>
~
상품은 업체가 주문을 확인하고, 출고하기까지 걸리는 시간입니다. 주문일+기준출고일+택배사배송일(2일)에 배송완료를 보장합니다.(토/공휴일은 배송기간에 포함되지 않습니다.) ※5일이내 출고가 시작되지 않을시, 오픈마켓 상품은 자동으로 주문이 취소되며, 고객님께 품절보상금을 지급해 드립니다.
배송비 안내
도서(중고도서 포함)만 구매하시면 : 배송비 2,000원 (1만원이상 구매 시 무료배송) 음반/DVD만 구매하시면 : 배송비 1,500원 (2만원이상 구매 시 무료배송) 잡지/만화/기프트만 구매하시면 : 배송비 2,000원 (2만원이상 구매 시 무료배송) 도서와 음반/DVD를 함께 구매하시면 : 배송비 1,500원 1만원이상 구매 시 무료배송) 도서와 잡지/만화/기프트/중고직배송상품을 함께 구매하시면 : 2,000원 (1만원이상 구매 시 무료배송) 업체직접배송상품을 구매시 : 업체별로 상이한 배송비 적용
* 세트상품의 경우 부분취소 시 추가 배송비가 부과될 수 있습니다.
* 북카트에서 배송비없애기 버튼을 클릭하셔서, 동일업체상품을 조금 더 구매하시면, 배송비를 절약하실 수 있습니다.
해외배송 안내
인터파크도서에서는 국내에서 주문하시거나 해외에서 주문하여 해외로 배송을 원하실 경우 DHL과 특약으로 책정된 요금표에
의해 개인이 이용하는 경우보다 배송요금을 크게 낮추며 DHL(www.dhl.co.kr)로 해외배송 서비스를 제공합니다. 해외배송은 도서/CD/DVD 상품에 한해 서비스하고 있으며, 다른 상품을 북카트에 함께 담으실 경우 해외배송이 불가합니다.
해외주문배송 서비스는 인터파크 도서 회원 가입을 하셔야만 신청 가능합니다.
알아두세요!!!
도매상 및 제작사 사정에 따라 품절/절판 등의 사유로 취소될 수 있습니다. 오픈마켓업체의 배송지연시 주문이 자동으로 취소될 수 있습니다. 출고가능 시간이 서로 다른 상품을 함께 주문할 경우 출고가능 시간이 가장 긴 기준으로 배송됩니다. 유통의 특성상 출고기간은 예정보다 앞당겨지거나 늦춰질 수 있습니다. 택배사 배송일인 서울 및 수도권은 1~2일, 지방은 2~3일, 도서, 산간, 군부대는 3일 이상의 시간이 소요됩니다.
;)
전체 0개의 구매후기가 있습니다.
교환 및 반품이 가능한 경우 
상품을 공급 받은 날로부터 7일이내 가능 
상품은 월~토요일 오전 10시 이전 주문분에 대하여 당일 출고/당일 배송완료를 보장하는 상품입니다.
상품은 서울지역/평일 주문분은 당일 출고/익일 배송완료를 보장하며,
상품은, 입고예정일(제품출시일)+택배사배송일(1일)에 배송완료를 보장합니다.
~ 
상품은 유통특성상 인터파크에서 재고를 보유하지 않은 상품으로
상품은 업체가 주문을 확인하고, 출고하기까지 걸리는 시간입니다.
