[1차 팀프로젝트] '나라장터' 웹스크래핑 하기 (3)
* 아이패드로 이어서 하는 웹스크래핑 -현재 진척사항 1. 2023년 1월 1일부터 15일까지의 입찰공고 페이지 수 확인 완료 (489페이지) 2. 489페이지 까지의 입찰공고 목록 내용 수집 완료 3. 수집내용 데이터 프레임으로 형성 완료 -해야할 사항 1. 컬럼 내용 변경하기 (지울 컬럼 : '공동 수급', '투찰' / 추가할 컬럼 : '재입찰 여부', '추정가격') 2. '재입찰 여부'에 대한 내용 수집할 방법 찾아보기 (셀레니움? 구글 드라이버?) 3. '추정가격'에 대한 내용 수집할 방법 찾아보기 (페이지에 '사업금액' 혹은 '추정가격' 등 표시된 내용이 다 다름) -실습 환경 1. 시기 : 가족과 함께하는 명절, 설날 2. 장소 : 컴퓨터는 없지만 와이파이는 있는 시골 할머니댁 3. 가진 것 ..
[1차 팀프로젝트] '나라장터' 웹스크래핑 하기 (2)
과제내용 1) 2023년 1월 1일부터 1월 15일까지 나라장터에 올라온 입찰공고 목록을 수집한다. 2) '공동수급' 과 '투찰' 컬럼은 삭제한다. 3) 상세페이지 링크를 수집하여 '추정금액'과 '재입찰 여부' 컬럼을 추가한다. 4) 컬럼의 순서를 변경한다. (분류 / 업무 / 공고번호-차수 / 공고명 / 공고기관 / 수요기관 / 계약방법 / 추정금액 / 입력일시 / 재입찰여부) 5) 수집한 데이터를 활용하여 새로운 데이터를 생성해낸다. 6) 해당 내용을 시각화해본다. 과제목표 1) 배웠던 코드를 활용하여 스스로 오류를 해결하며 코드를 작성할 수 있다. 2) 주어진 환경 안에서 최대한 노력하여 결과물을 얻는다. (명절 시골방문, 노트북x, 아이패드 첫 사용 등..) 3) 본인이 짠 코드와 조원의 코드를 ..
[1차 팀프로젝트] '나라장터' 웹스크래핑 하기 (1)
과제내용 1) 2023년 1월 1일부터 1월 15일까지 나라장터에 올라온 입찰공고 목록을 수집한다. 2) '공동수급' 과 '투찰' 컬럼은 삭제한다. 3) 상세페이지 링크를 수집하여 '추정금액'과 '재입찰 여부' 컬럼을 추가한다. 4) 컬럼의 순서를 변경한다. (분류 / 업무 / 공고번호-차수 / 공고명 / 공고기관 / 수요기관 / 계약방법 / 추정금액 / 입력일시 / 재입찰여부) 5) 수집한 데이터를 활용하여 새로운 데이터를 생성해낸다. 6) 해당 내용을 시각화해본다. 과제목표 1) 배웠던 코드를 활용하여 스스로 오류를 해결하며 코드를 작성할 수 있다. 2) 주어진 환경 안에서 최대한 노력하여 결과물을 얻는다. (명절 시골방문, 노트북x, 아이패드 첫 사용 등..) 3) 본인이 짠 코드와 조원의 코드를 ..