본문 바로가기

Ankiwoong

(1841)
Pandas - Json File Data 분석 1(기본 문법 사용) 1. Sample Datausa.gov 사이트를 방문한 데이터들을 JSON 형식으로 작성한 데이터JSON(Javascript Object Notation) : 자바스크립트 객체 표현 방법JSON은 Python의 dict 데이터 타입과 비슷(동일){key1 : value1, key2 : value2 ...} 2. import Moduleimport json import pandas as pd import matplotlib.pyplot as plt import seaborn as sns from print_df import print_df 3. Python Basic Code- Data File 경로 지정path = 'data\example.txt' - File 확인print(open(path, encod..
Python Learn the basics Quiz 35 Q>(2017년)KAKAO BLIND RECRUITMENT네오는 평소 프로도가 비상금을 숨겨놓는 장소를 알려줄 비밀지도를 손에 넣었다.그런데 이 비밀지도는 숫자로 암호화되어 있어 위치를 확인하기 위해서는 암호를 해독해야 한다.다행히 지도 암호를 해독할 방법을 적어놓은 메모도 함께 발견했다.지도는 한 변의 길이가 n인 정사각형 배열 형태로, 각 칸은 공백(" ) 또는벽(#") 두 종류로 이루어져 있다.전체 지도는 두 장의 지도를 겹쳐서 얻을 수 있다. 각각 지도 1과 지도 2라고 하자.지도 1 또는 지도 2 중 어느 하나라도 벽인 부분은 전체 지도에서도 벽이다.지도 1과 지도 2에서 모두 공백인 부분은 전체 지도에서도 공백이다.지도 1과 지도 2는 각각 정수 배열로 암호화되어 있다.암호화된 배열은 지도의 ..
빅데이터 가설 설정 - HRD 온라인 교육 수강 노트 1. 빅데이터 분석- 대량의 정형, 비정형 데이터로부터 정보를 추출- 데이터속에 숨겨진 패턴 데이터 간의 관계를 발견해 정보를 추출 분석하는 과정- 통계 및 데이터 마이닝- 수집된 데이터로 특정 변ㅅ의 미래값 예측- 인자에 대한 값을 추정해 모델 도출- 모델의 유의성 검을 위한 가설을 세우고 가설 검정 시행2. 통계 분석- 객관적인 근거에 기반을 둔 의사결정을 위해 데이터를 수집, 처리, 분류, 분석, 해석하는 프로세스- 분석 목적에 부합 선택- 다양한 통계 툴 사용 3. 데이터 마이닝 기분 분석- 통계 및 수학적 기술들을 화용해 빅데이터를 순석- 새로운 상관관계 / 추세 / 예측 / 분류 등을 찾아내고 수행- 기계학습 / 패턴인식과 관련해 빅데이터 분석에 가장 기본 4. 통계적..
빅데이터 프로젝트 계획 수립- HRD 온라인 교육 수강 노트 1. 프로젝트 자원분배- 소요기간별 투입 인원 역활 검토 후 구분㉠ 인건비 배분 기준 인원 외 비상주 인원까지 고려하여 역활 구분 - 프로젝트 필수 산출물을 정의 지정㉠ 단계별 필수 산출물을 명시하여 단계별 평가와 종료평가 시 활용할 수 있도록 지정 2. 프로젝트 투입 인원 업무 분장- 데이터 분석과제 계획서㉠ 데이터 분석 목표 정의서 포함 기재㉡ 프로젝트 일정계획, 자원배분 계획, 의사소통 계획 포함 - 데이터 탐색 보고서㉠ 데이터 수지버대상 내용 포함 기재㉡ 데이터 후보 변수 도출과정 및 최종 후보 변수 목록 포함㉢ 데이터 분석 가설별 유의성 검증 내용 포함 - 데이터 모델링 및 검증 보고서㉠ 데이터 모델링 방안 및 실험계획 포함 기재㉡ 데이터 분석 모델 유지보수 위한 산출물㉢ 데이터 모형 비교검증 ..
빅데이터 분석목표 수립하기- HRD 온라인 교육 수강 노트 1. 분석목표 정의서의 항목- 분석기본 정보㉠ 분석 명칭㉡ 분석 목적㉢ 분석 우선 순위㉣ 분석 접근 방안㉤ 분석 목표 확정일㉥ 분석 목표 워크샵㉦ Owner 조직명- 성과측정㉠ 정성적 기준 : 신규기법/기술, 외부데이터, 신규데이터, 기타㉡ 정량적 기준 : 분석 가설, 검증 - 데이터 정보㉠ 내부 데이터㉡ 외부 데이터- 데이터 분석 적용성 판단2. 분석 목표 워크샵- 워크샵 계획㉠ 워크샵 진행자, 작성자 워크샵 계획㉡ 워크샵 참석인원, 필요한 자료, 총 미팅 횟수 판단 - 개간미팅 수행㉠ 검토할 자료의 배경 관련된 가정 목적에 대해 설명 - 워크샵에 사용한 자료 사전 검토㉠ 오류확인 목록, 가능한 오류 발생 될 문제 파악㉡ 정의서에 심각한 오류는 수정 - 워크샵 수행㉠ 분..
Python - 한국기상청 도시별 현재 날씨 Data 분석 시각화 1. Import Moduleimport pandas as pd from print_df import print_df import matplotlib.pyplot as plt 2. Sample Data : https://developer-ankiwoong.tistory.com/259 3. Codeimport pandas as pd from print_df import print_df import matplotlib.pyplot as plt df = pd.read_csv('weather.csv', encoding='utf=8') df_list = list(df['지역']) index_dict = {} for i, v in enumerate(df_list): index_dict[i] = v df.drop('..
Python - 한국기상청 도시별 현재 날씨 정보 분석 후 csv 저장 1. import moduleimport requests from bs4 import BeautifulSoup as BS 2. Sample URL : http://www.weather.go.kr/weather/observation/currentweather.jsp 3. HTML Parsing Codeimport requests from bs4 import BeautifulSoup as BS url = 'http://www.weather.go.kr/weather/observation/currentweather.jsp' response = requests.get(url) if response.status_code != 200: print("%d 에러가 발생했습니다." % response.status_code..
Python - Import 1. Import모듈 / 패키지 라이브러리를 가져오는 명령어 2. import module 기본 방법import 모듈 import 모듈1, 모듈2 모듈.변수 모듈.함수() 모듈.클래스() 3. import as : 긴 모듈 이름 대신 별명으로 로드하는법import 모듈 as 별명 4. from import : 모듈안에 필요한 변수만 가져오는 법from 모듈 import 변수 from 모듈 import 함수 from 모듈 import 클래스 from 모듈 import 변수, 함수, 클래스 from 모듈 import * 5. from import as : 3 + 4 형식from 모듈 import 변수 as 별명 from 모듈 import 함수 as 별명 from 모듈 import 클래스 as 별명 from ..