잠시 방향을 틀어서 시계열 데이터에 대한 decomposition에 대해서 알아보자. 시계열 데이터라고 하면 분명히 여러 요소의 복합적으로 나타나는 걸거다. 예를 들어 주식에 빗대어 보면, A라는 주식이 왜 이 시간대에 오르는 추세를 일정 시간 동안 보이는가? 를 고찰 해봤을때 FED가 시장에 유동성을 확 풀어서 그럴 수도.. A라는 회사의 실적이 예상밖에 잘나와서 그럴 수도.. 혹은 A라는 회사의 제품이 시즌을 타는 제품인데 해당 시즌이 다가와서 다음 분기 실적이 좋을 것으로 예상 되기 때문 일수도 있다. 당연히 그 이외의 원인들이 많겠지만 결국 시계열 데이터가 보여 줄 수 있는 정보를 분해해서 보게 되면 좀 더 분석자가 쉽고 빠르게 받아 들일수 있는 것 아니겠는가? 그럼 분해 할 수 있는 요소는 무엇..

보통 검색으로 우연히 keyword가 매칭되서 들어온 독자들이 대부분 이실 것으로 생각됩니다. 본론부터 들어가봅시다. 보통 Table 형식의 Data들은 아래와 같은 구조로 되어 있을 겁니다. 열 index 1 열 index 2 열 index 3 열 index 4 ..... *** *** *** *** *** *** *** *** *** *** *** *** *** *** *** 일반적인 형태죠. 여기서 출발해봅시다. 여기서 한번 가정을 해보죠. 열 index 1이 핸드폰 브랜드를 나타낸다라고요. (삼성 or 애플) 그리고 열 index2 는 당일 판매 대수를 나타낸다고 합시다. 우리는 이제 해당 Data를 종합적으로 보고 싶을 것이고, 문득 궁금해졌습니다. 해당 DataSet에서 삼성 과 애플로 구분되..

Pandas DataFrame에서 특정 행/열을 선택하는 방법은 여러가지가 있습니다. 단연코 Pandas를 사용하면서 이러한 선택의 기로에 많이 놓이게 됩니다. 어떤 방법을 써야될지 혼동이 오는 경우가 참 많죠. " 역시 반복 밖에 없나봅니다." 자 시작해보겠습니다. 일단 방법은 크게 2가지입니다. 1. 행번호(row number)로 선택하는 방법 (.iloc) 2. label이나 조건표현으로 선택하는 방법 (.loc) 1. 행번호(row number)로 선택하는 방법(.iloc) 조금 혼동이 있을수 있을수 있어 간단하게 다시 표현하면 " 행이든 열이든 숫자로 location을 나타내서 Selecting or indexing 하는 방법입니다." 상상을 조금 해봅시다. row number가 0부터 전체 r..

테이블 형태의 자료구조를 상상해봅시다. Column 중에 Text 정보를 가진 Column에서 일정 패턴 규칙을 가진 Text열을 추출 하고자 할때 정규표현식을 이용할수 있겠습니다. 관련 활용 예시를 간단히 알아보겠습니다. 일단 자료로 쓸 .csv파일을 load해서 추출대상 column을 따로 분리해두도록 합시다. import pandas as pd import re hn = pd.read_csv("hacker_news.csv") titles = hn['title'] pandas는 기본적으로 활용하는 모듈이니 그렇다 치고. re모듈은 정규표현식을 활용하는데 도움을 주는 모듈입니다. 상세한 내용은 별도 포스팅에서 다루겠습니다. hn으로 csv파일 전체를 불러왔고, titles라는 변수에 title열의 정보..

https://www.anaconda.com/distribution/#download-section Anaconda Python/R Distribution - Free Download Anaconda Distribution is the world's most popular Python data science platform. Download the free version to access over 1500 data science packages and manage libraries and dependencies with Conda. www.anaconda.com 위 링크로 들어가서 다운 받도록 합시다. 의심되면 검색해서 들어가셔도 됩니다. 다운로드 다 받았으면 실행. 0.5 기가 정도 되네요. Defau..

우리가 꽤 큰 파이썬 프로젝트의 일원이라고 생각해봅시다. 당연히 파이썬 스크립트 파일은 하나가 아닐거고, xxx.py 라는 스크립트 안에 이미 개발되어있는 함수를 yyy.py라는 파일에서 사용하고 싶어질수도 있을 것입니다. 그럼 그때 복붙하는 것은 너무 비효율적이겠지요. 이러한 필요성으로 다른 스크립트로부터 파이썬코드를 import 할수 있습니다. 만약에 현재 작업중인 폴더에 import하고 싶은 파이썬 스크립트가 있다면, 단순히 아래와 같이 import 뒤에 파일명을 확장자 없이 써주는 것만으로 import행위를 할수 있습니다. 단순하지요? import useful_functions 보통 위와 같은 import는 파일의 제일위에 적으며, 한줄에 하나씩 나눠 적는게 약속입니다. 이제 import한 use..