새로운 시작~!

https://cocoabba.tistory.com/66 [PYTHON] 전국 모든 아파트/오피스텔 단지 목록 가져오기 (2/4)https://cocoabba.tistory.com/63#comment9750537 [PYTHON] 전국 모든 아파트/오피스텔 단지 목록 가져오기 (1/4)그 간 여러번의 포스팅을 통해서 네이버 부동산에 대한 정보를 들여다 볼 수 있었다. https://cocoabba.cocoabba.tistory.com 이전 2/4 포스팅 이후 포스팅을 진행합니다.목표 : 네이버 부동산에서 전국 모든 아파트/오피스텔 단지 정보 추출하기   - 항목 : 아파트, 매매가, 전세가, 평형구조, 구조 별 세부 정보1. 네이버 부동산 단지 정보 살펴보기  (개발자 도구 포함), 결과 양식 확인하기2...

그 간 여러번의 포스팅을 통해서 네이버 부동산에 대한 정보를 들여다 볼 수 있었다.  https://cocoabba.tistory.com/56 [PYTHON] 네이버 부동산 상가 매물 크롤링하기(1/4)앞선 포스팅에 이어 약 1년이 지난 시점에 관련 질문이 있는 듯 하여 각 과정을 아래와 같은 단계로 포스팅하려고 합니다. https://cocoabba.tistory.com/42 [PYTHON] 네이버 부동산 상가 매물 크롤링하기 개cocoabba.tistory.comhttps://cocoabba.tistory.com/57 [PYTHON] 네이버 부동산 상가 매물 크롤링하기(2/4)앞선 포스팅에서 파이선을 이용하여 네이버 부동산 상가 매물 크롤링을 하기 위한 첫 단계로 개발자도구를 활용하여 PC 웹 페이지..

앞선 포스팅에서 python을 이용하여 네이버 부동산 상가 매물 크롤링을 하기 위한 두번째 단계로 개발자도구를 활용하여 PC가 아닌 모바일 웹 페이지에 접근하여 PC에서 요청 시 발생하는 정보보다 간소화 된 데이터를 확인하면서 실제 필요 데이터를 확인하기 위한 요청메시지를 구성하는 단계까지 확인하였다. https://cocoabba.tistory.com/57 [PYTHON] 네이버 부동산 상가 매물 크롤링하기(1/6) 앞선 포스팅에 이어 약 1년이 지난 시점에 관련 질문이 있는 듯 하여 각 과정을 아래와 같은 단계로 포스팅하려고 합니다. https://cocoabba.tistory.com/42 [PYTHON] 네이버 부동산 상가 매물 크롤링하기 개 cocoabba.tistory.com 1. 개발자 도구를..

개인적으로 대학교 시절 컴퓨터 공학과를 나왔다는 점, 그 동안 개발 업무를 해오진 않았지만 대학교 시절이 기억을 되새기면 최근 파이썬 스크립트 작성에 재미를 붙이고 있는 중에 있다. 그 중에 크롤링에 재미를 붙이게 되었고, 특히 다른 측면에 관심을 가지게 된 부동산과의 조합을 생각하게 되었으며 부동산 중에 제 관심은 바로 "상가"!! 제대로 된 상가의 시세를 알기 위해서는 전반적인 주변의 시세를 함께 알아야 매수하고자 하는 물건의 가치가 주변의 기준 대비 높게 평가되어 있는지 낮게 평가되어 있는지 알 수 있다. 하지만, 근처 매물을 검색해보면 수백개의 매물이 검색되며, 각각의 매물에서 제공하는 정보또한 굉장히 많다. 한 지역만 조사하려고 해도 몇시간을 소모해야 하는 비용이 발생함에 따라 이를 자동화 하기..

목표 : 네이버쇼핑에서 내가 원하는 키워드에 대한 도출 결과 추출 - 항목 : 상품명, 링크, 가격, 등록일, 카테고리, 리뷰, 별점 1. 페이지 살펴보기 (개발자 도구) 2. Beautifulsoup 를 통한 상품 목록 추출 -> 실패 : 5개 상품까지만 가져옴. 3. Selenium, Beautifulsoup 조합을 통한 상품 목록 추출 -> 실패 : 40개 상품 가져오지만, 이미지 일부를 로딩하지 못함 4. Json 파일 요청을 통한 목록 추출 -> 성공 : 드디어 모든 상품 정보를 가져옴 1. 페이지 살펴보기 (개발자 도구) 개발자 도구를 통해서 각각의 상품 정보를 li 태그(class:basicList_item__2XT81)나 div 태그(class:basicList_inner__eY_mq)를 ..