텍스트는 물론 이미지, 사운드까지 낱낱이 분석하자!
혼란스러운 용어와 빅데이터 사례, 직접 데이터를 수집하고 모델링 해봐야 안다!
데이터마이닝과 머신러닝은 서로 다른 것일까?
경마 우승마, 상한가 종목을 예측할 수 있을까?
영화 속 범죄자 얼굴 식별이 현실에서 가능할까?
소리로 거짓말 판별과 동물 감정 식별이 가능하다고?
이제 막 R에 입문했는데, Python은 또 어떻게 활용하는 거야?!!
「빅데이터 활용서 II」는 전작에 비해 다양한 내용을 다루었다. 모든 내용에 대해 데이터와 모델을 제시하지는 않았지만, 지금까지 출간한 책들을 보면 쉽게 접근할 수 있을 내용들이다. 독자들 중에서 어떤 이는 코드가 있는 내용을 원하고 어떤 이는 그렇지 않다. 그러므로 모든 독자를 만족시킬 수는 없으므로 상황에 따라 코드를 추가하였다.
지금까지 다룬 내용을 살펴보면, 정형 데이터에서부터 비정형 데이터로 영역을 지속적으로 확장해 왔고, 일부는 다양한 산업에 대해 구체적인 내용을 제시했다. 앞으로도 이러한 방향으로 지속될 것이며, 보다 다양한 도구들과 분석환경 및 기법을 제시하고자 한다.
빅데이터의 역사는 길다면 길고, 짧다면 그러할 수 있다고 본다. 그러다보니 겪어보지 못한 어느 이상 수준의 레벨에서는 상세하고 체계적으로 다루지 못한 부분도 있다. 그러나 저자는 경험과 지식 없이 추상적으로 내용을 다루는 것을 지양하므로, 지금과 같이 범위와 깊이를 계속 확대해서 제시하고자 한다.
활용서 다음 편에서는 어떤 내용이 나올지 기대해 주기를 바란다. 지금까지 다룬 내용과 접근보다는 차별적인 내용이 나올 것으로 생각한다.
● 베타테스터 서평
이 책을 통해 교육을 받고 주가예측 내용을 처음 모델링하였는데 정말로 상한가 예측이 가능하다는 것을 보고 놀라울 따름이다. 개인적으로도 관심 가는 내용이고 회사 업무에 적용할 때 응용하는 데 많은 도움이 되었다.
- amy***
음성거짓말 식별에 참여하고 데이터를 제공하면서 직접 경험하였다. 어떻게 일상생활에 관련된 내 목소리만을 갖고 거짓말을 70%에 가깝게 구분할 수 있는지 신기했다. 이 분야를 공부하고 싶어진다.
- micc***
수많은 지인이나 그들의 주변 사람들 얼굴정보를 수치화했는데 성공적으로 구분해 냈다! 고생하면서 작업한 보람을 느끼고 통계학 전공자로서 데이터 마이닝에 관심이 더 생긴다.
- 200col***
탐색적 분석에 대해 많은 환상을 가졌지만, 막상 배우고 나니 과거에 들어오던 복잡한 절차들이 매우 간단하게 정리되었다. 지금까지 고생하며 다루던 품질데이터에 대해 앞으로 일하는데 보다 효율적으로 일할 수 있을 것 같다.
- z03_***
우리 집 애들 목소리의 특성에 대해 분석해봤다. 어떻게 첫째와 둘째 아이의 성격까지 파악을 해주는지 놀랍다. 사운드에 대한 관심과 다양한 응용을 시도해 보고 싶다.
- qwer***
다양한 비정형 데이터들의 내용이 흥미로웠으며, 내용을 보면 볼수록 내가 다루는 업무에 응용해서 적용할 수 있는 것들을 다양하게 생각할 수 있었다. 이 책을 주변에 추천해서 보다 더 많은 사람이 도움 받길 바란다.
- gkkw***
Social Sales Lead 관련되어 과제를 받아 추진했으나 결과가 좋지 못했다. 그런데 이렇게 책으로 공개된다니 다시 한 번 도전해 봐야겠다.
- gold***
● 저자 소개
김경태
- The ECG 대표
- 한국데이터베이스진흥원 빅데이터 아카데미 분석전문가 과정 강사
- 現한양대학교 산업공학과 겸임교수
- 주요 분야 : CRM, Data Mining, Big Data AnalyticsInline
- 前Ernst & Young Business Advisory Service Director
- 前Accenture Manager
- 前Oracle DW/DBM Principal Consultant
- 30여개 다국적 기업 및 대기업 CRM, 전략, Big Data 분석프로젝트 수행
안정국
- 前The ECG 상무
- 한국데이터베이스진흥원 빅데이터 아카데미 분석전문가 과정 멘토
- 前삼성SDS
- 前삼일회계법인
- 前두산정보통신
- 한국공인회계사/세무사, 컨설턴트, CISA, CFE
- 데이터분석/기획/재무/IT 부문의 다양한 경험
- 금융, 제조업, 통신업, 공기업 컨설팅 다수 경험
김동현
- 한국정보기술단 수석 : 공공, 금융기관 정보시스템감리
- 前한신정평가 근무
- 前한국신용정보 근무
- 전사DBA
- 개인신용평가, 기업재무분석, 상장기업분석시스템,
기업신용평가시스템 등 구축
- 수협중앙회 RMS구축 프로젝트
- 한국데이터베이스진흥원 빅데이터 아카데미 1기 수료
(최우수 프로젝트 : 소셜분석을 통한 주가변동 예측)
- 보유자격 : 정보관리기술사, 정보시스템감리 수석감리원
- 저서 : 임베스트 CISA(공저)
빅데이터,BIGDATA,PHYTHON,파이썬,CRM,CRM분석,경영과학,경영정보,주식시뮬레이션,텍스트마이닝,주가예측,상한가종목예측,우승경주마예측,경마예측,모델링,소리분석,얼굴식별,이미지분석응용,시뮬레이션,데이터베이스론,비정형데이터마이닝,인사이트,데이터분석기획,전략인사이트도출,빅데이터처리기술,비즈니스모델,빅데이터활용,데이터분석,처리기술,시각화
PART1 이론1장 분석시장 동향 및 산업특성2장 분석적 사고 및 모델링1절 자동차 판매점 위치 지정을 위한 데이터 수집방안2절 통화패턴을 이용한 관계 데이터 생성3절 용량과 구매주기 간의 관계4절 실시간 Event 활용5절 Luxury 지수6절 Ferrari 지수7절 제조업에서의 활용8절 유통사9절 카드사10절 통신사11절 인사관리12절 빅데이터 교육 및 조직관리3장 탐색적 분석1절 탐색적 분석에 대한 정의2절 프로젝트에서의 사례3절 분석방향 및 가설수립4절 효율적인 수행원칙5절 탐색적 분석방법론4장 마트 생성방법론1절 데이터 용량에 대한 문제2절 마트생성 속도 및 스크립트 복잡성3절 가치 있는 변수 만들기5장 탐색적 분석을 위한 R 사용1절 주요 패키지 및 기능2절 자동화ㆍ문서화 및 배포6장 주가 데이터처리 및 EDA1절 주가 데이터 입수방안 및 구성7장 Python 기초1절 Python이란?2절 Python 설치3절 파이썬 프로그래밍 기본4절 파이썬 사용한 데이터 입수5절 XML6절 IPython과 R의 비교7절 IPython과 R의 사용법 비교8절 IPython에서 R을 연동하여 사용하기PART2 활용사례1장 상한가 종목 예측2장 주가 예측 모델링1절 단일 주식에 대해 Quandl과 quantmod를 이용한 모델링과 손익 시뮬레이션2절 다수의 주식에 대해 portal에서의 data 획득과 모델링 및 손익 시뮬레이션3절 거래량 data를 이용한 분석4절 맺음말3장 경마 우승마 예측1절 경마 정보2절 정보의 획득3절 Data Mart 구성4절 모델링5절 손익 Simulation6절 경마 실전7절 맺음말4장 Social Sales Lead1절 Sales Lead 정의2절 브랜드별 특성3절 Architecture 및 ROI 도출5장 소리를 이용한 동물 감정 식별1절 개소리 수집2절 데이터 분석3절 모델링 접근방식 요약6장 다양한 상황 사운드 분석1절 물 소리2절 상황 소리3절 장소 소리4절 자동차 브랜드별 소리7장 음성 거짓말 식별1절 데이터 수집2절 EDA3절 결론8장 동일인 목소리 식별9장 범죄자 얼굴식별1절 데이터 수집 및 변수생성2절 모델링 및 검증10장 이미지 분석 응용11장 빅데이터의 CRM분야 적용1절 최적 Call Time2절 기업의 수익증대 및 효율성 증대3절 대량구매고객4절 Surprise 지수12장 군 빅데이터1절 군의 특징 및 빅데이터의 필요성2절 휴전선에서의 모니터링 자동화3절 관심병사 예측4절 War Game 입력데이터 생성5절 첩보 텍스트 정보에 대한 진실식별6절 보안관련 거짓말 식별13장 건설안전ㆍ빌딩품질 빅데이터1절 건설안전 빅데이터2절 빌딩품질 빅데이터
