spolov

데이터 프레임 다운로드/확인 데이터 프레임의 요약 정보 확인 -누락값 처리하기 누락값 개수 확인 =>isna(): 각 행 비어있는지의 여부 불리언 배열 반환 누락값 표시하기(1): none 정수 값이 있는 열에 none 입력하면 누락값으로 인식 판다스에서는 nan값을 실수로 저장함 =>다시 정수형으로 바꾸기 위해 astype() 사용 문자열에서는 none 입력해도 nan으로 표시x =>np.nan 사용 누락값 표시하기(2):np.nan 누락값 바꾸기(1):loc() isna()는 누락값을 찾아 불리언 배열로 반환 누락값을 빈 문자열로 변환 누락값 바꾸기(2): fillna() 특정 열만 선택해서 fillna() 사용 가능 (여러개의 열 선택 가능) 누락값 바꾸기(3): replace() 바꾸려는 값 여러..

데이터 분석 2023. 7. 11. 15:30

필요한 데이터 다운받기 판다스 데이터 프레임으로 읽기 -열 삭제하기:loc(),불리언 배열 번호~등록일자까지의 열 선택(마지막 열 제외) column의 속성 확인->index 클래스 객체 원소별 비교로 true/false 반환->넘파이 배열 선택된 열만 출력 가능 -열 삭제하기:drop() 삭제하고자 하는 열의 이름, axis 매개변수에 1 지정하면 열을 삭제하는 것 ns_book 변수에 저장하지 않고 데이터 프레임을 바로 수정하려면 =>inplace 매개변수를 True로 설정 -비어있는 값 삭제하기:dropna() 데이터 프레임에서 nan 값 포함된 열 삭제(axis=1) =>nan값 적어도 하나 있으면 삭제 모든 값이 nan인 열 삭제 =>how 매개변수 all로 지정 -행 삭제하기:drop() 처음..

데이터 분석 2023. 7. 10. 22:32

->웹사이트에 접속해 필요한 정보 가져오기 20대가 가장 좋아하는 도서 목록 다운로드 다섯개 행 출력 원하는 열을 리스트로 선택 가능 행과 열 선택: loc() 리스트 대신 슬라이스 연산자 사용 가능 시작/끝을 지정하지 않으면 전체 선택을 의미 스텝 지정 가능

데이터 분석 2023. 7. 9. 23:12

-API 접근 권한 제한 등의 이유로 db에 접근이 어려울 시 인증된 url만 있으면 데이터에 접근할 수 있는 방식 프로그램 간 데이터 전송 규칙 규정 -HTTP 웹페이지 전송 통신 규약 웹데이터 요청(HTTP) 웹데이터 전송(HTML) -웹기반 API(HTTP 프로토콜을 사용하는 API) 웹데이터 요청(HTTP) 웹데이터 전송(CSV,JASON,XML) -JSON 데이터 키:값 json_loads(): json 문자열을 파이썬 객체로 변환 -XML 데이터 부모/자식 시작/종료 태그 element xml 문자열을 a변수에 저장 fromstring() 함수 사용해 a 문자열을 xml(book)로 변환 book 객체를 리스트로 변환하여 자식 엘리먼트 구함 book_child 리스트의 각 항목을 name,au..

데이터 분석 2023. 7. 6. 22:49

-엑셀 vs csv 엑셀: 시각적으로 데이터 파악 편리 csv: 텍스트 파일, 분석 시 사용하는 파일은 csv 형태 : 레코드(행)/필드(열) -컴퓨터에 다운 받은 csv 파일 불러오기: open() *만약 encoding='euc-kr'이 없다면?? =>'utf-8' codec can't decode byte 0xc1 in position 0: invalid start byte open() 함수는 기본적으로 텍스트 파일이 UTF-8 형식으로 저장되어 있다고 가정. 그러나 한글 텍스트는 여전히 완성형 인코딩인 EUC-KR을 사용하는 경우 많음. 즉, 인코딩 형식을 지정하여 해결. -판다스 데이터 프레임 엑셀 파일과 형식 비슷(가상의 테이블) 배열과 차이점: 각 열에 다른 형태의 데이터 올 수 있음 -cs..

데이터 분석 2023. 7. 5. 20:49

(*KUSF 러너 데이터 분석 대외활동 공모전 기록) (*KUSF 클럽 챔피언십 실습부터 팀원들과 함께한 프로젝트) 주제: 2001~2022 KBO 한국시리즈 MVP 예측 스탯 고안하기

데이터 분석 2022. 12. 29. 23:12

타율(AVG) ->H/AB 안타/타수 장타율(SLG) ->((H - "2B" - "3B" - HR) + 2*"2B" + 3*"3B" + 4*HR+0.0)/AB (1루타 + 2*2루타 + 3*3루타 + 4*홈런) / 타수 (*1루타 계산 주의!) 출루율(OBP) ->((H + BB + HBP+0.0)/(AB + BB + HBP + SF) (안타 + 볼넷 + 사구) / (타수 + 볼넷 + 사구 + 희생플라이) 장타율 + 출루율(OPS) BABIP ->((H - HR+0.0)/(AB - SO - HR + SF) (안타 – 홈런)/(타수 – 삼진 – 홈런 + 희생플라이) WHIP -> (H + BB + 0.0)/(IPouts/3.0) (피안타 + 볼넷)/이닝 가중 출루율(wOBA) ->(0.69*(BB - IB..

데이터 분석 2022. 11. 9. 17:24

테이블 DB의 구성 요소 행/열로 구성 테이블 생성하기 CREATE TABLE 테이블 (컬럼 데이터 타입) CREATE TABLE friend (idx INTEGER, name TEXT); 데이터 타입: TEXT, INTEGER(정수), REAL(실수) 등 테이블 확인하기 .tables 테이블의 구조 확인하기 .schema friend 테이블 삭제하기 DROP TABLE friend; 데이터 데이터 입력하기 INSERT INTO 테이블 VALUES (데이터); INSERT INTO friend VALUES (1,'김철수'); 또는 INSERT INTO 테이블 (컬럼) VALUES(데이터); 데이터 조회하기 SELECT 컬럼 FROM 테이블 SELECT name FROM people; 1. 모두 조회하기 ..

데이터 분석 2022. 10. 17. 23:58