spolov

데이터 분석 2023. 7. 23. 14:01

주제: Python programming for government open data use case 참여 대상: World Friend ICT Group(Me) and DGC,MTC 세부주제: To retrieve data from API with python Data analysis with python(samples) 날짜:7/31~8/3 대략적 개요 To retrieve data from API with python -api란 무엇인가(웹기반 api->http) -csv,json,xml -파이썬에서 json 데이터 다루기 -파이썬에서 xml 데이터 다루기 -api로 정보 찾기 Data analysis with python(samples) -판다스/넘파이 기본 문법 -결측치 처리 -시각화(그래프) ..

데이터 분석 2023. 7. 14. 21:01

데이터 프레임 다운로드/확인 데이터 프레임의 요약 정보 확인 -누락값 처리하기 누락값 개수 확인 =>isna(): 각 행 비어있는지의 여부 불리언 배열 반환 누락값 표시하기(1): none 정수 값이 있는 열에 none 입력하면 누락값으로 인식 판다스에서는 nan값을 실수로 저장함 =>다시 정수형으로 바꾸기 위해 astype() 사용 문자열에서는 none 입력해도 nan으로 표시x =>np.nan 사용 누락값 표시하기(2):np.nan 누락값 바꾸기(1):loc() isna()는 누락값을 찾아 불리언 배열로 반환 누락값을 빈 문자열로 변환 누락값 바꾸기(2): fillna() 특정 열만 선택해서 fillna() 사용 가능 (여러개의 열 선택 가능) 누락값 바꾸기(3): replace() 바꾸려는 값 여러..

데이터 분석 2023. 7. 11. 15:30

필요한 데이터 다운받기 판다스 데이터 프레임으로 읽기 -열 삭제하기:loc(),불리언 배열 번호~등록일자까지의 열 선택(마지막 열 제외) column의 속성 확인->index 클래스 객체 원소별 비교로 true/false 반환->넘파이 배열 선택된 열만 출력 가능 -열 삭제하기:drop() 삭제하고자 하는 열의 이름, axis 매개변수에 1 지정하면 열을 삭제하는 것 ns_book 변수에 저장하지 않고 데이터 프레임을 바로 수정하려면 =>inplace 매개변수를 True로 설정 -비어있는 값 삭제하기:dropna() 데이터 프레임에서 nan 값 포함된 열 삭제(axis=1) =>nan값 적어도 하나 있으면 삭제 모든 값이 nan인 열 삭제 =>how 매개변수 all로 지정 -행 삭제하기:drop() 처음..

데이터 분석 2023. 7. 10. 22:32

->웹사이트에 접속해 필요한 정보 가져오기 20대가 가장 좋아하는 도서 목록 다운로드 다섯개 행 출력 원하는 열을 리스트로 선택 가능 행과 열 선택: loc() 리스트 대신 슬라이스 연산자 사용 가능 시작/끝을 지정하지 않으면 전체 선택을 의미 스텝 지정 가능

데이터 분석 2023. 7. 9. 23:12

-API 접근 권한 제한 등의 이유로 db에 접근이 어려울 시 인증된 url만 있으면 데이터에 접근할 수 있는 방식 프로그램 간 데이터 전송 규칙 규정 -HTTP 웹페이지 전송 통신 규약 웹데이터 요청(HTTP) 웹데이터 전송(HTML) -웹기반 API(HTTP 프로토콜을 사용하는 API) 웹데이터 요청(HTTP) 웹데이터 전송(CSV,JASON,XML) -JSON 데이터 키:값 json_loads(): json 문자열을 파이썬 객체로 변환 -XML 데이터 부모/자식 시작/종료 태그 element xml 문자열을 a변수에 저장 fromstring() 함수 사용해 a 문자열을 xml(book)로 변환 book 객체를 리스트로 변환하여 자식 엘리먼트 구함 book_child 리스트의 각 항목을 name,au..

데이터 분석 2023. 7. 6. 22:49

-엑셀 vs csv 엑셀: 시각적으로 데이터 파악 편리 csv: 텍스트 파일, 분석 시 사용하는 파일은 csv 형태 : 레코드(행)/필드(열) -컴퓨터에 다운 받은 csv 파일 불러오기: open() *만약 encoding='euc-kr'이 없다면?? =>'utf-8' codec can't decode byte 0xc1 in position 0: invalid start byte open() 함수는 기본적으로 텍스트 파일이 UTF-8 형식으로 저장되어 있다고 가정. 그러나 한글 텍스트는 여전히 완성형 인코딩인 EUC-KR을 사용하는 경우 많음. 즉, 인코딩 형식을 지정하여 해결. -판다스 데이터 프레임 엑셀 파일과 형식 비슷(가상의 테이블) 배열과 차이점: 각 열에 다른 형태의 데이터 올 수 있음 -cs..

데이터 분석 2023. 7. 5. 20:49

#메소드 ->클래스 내에서 선언된 함수 1. 메소드 선언 리턴타입 메소드이름(매개변수 선언){ 실행문.. } static int outTen() { return 10; } 1-1.리턴타입에 따른 메소드 선언 //1.정수형 리턴 타입 static int outFive() { return 5; } //2.실수형 리턴 타입 static double outPi() { return 3.14; } //3.문자 리턴 타입 static char charK() { return 'k'; } //4.문자열 리턴 타입 static String hello() { return "안녕하세요";//리턴값 반드시 필요 } 2. 메소드 실행&호출 메소드이름(매개변수..); package contents; public class C01_..

코딩 기록 2023. 1. 19. 01:02