일상의 영감, Nomad-engHu

  • 홈
  • 태그
  • 방명록

selenium 1

[Bigdata 수집] Selenium 크롤링 예시 (+실행영상)

지역검색과 같이 '펼쳐보기' 기능이 필요한 동적 스크래핑은 javascript로 표시되었음을 알 수 있다 항목 중 '서울'도 javascript 형태로 되어있고 서울이라는 단어를 찾기(search)해도 나오지 않은 것으로 보아 동적 페이지이다 먼저 Selenium은 브라우저 지원을 위한 WebDriver API를 이용한다 크롬 도움말에서 정보를 확인후 맞는 버전으로 chrondriver를 다운받고 jupyter notebook을 실행하는 작업공간 경로에 복사한다 selenium 내부에서 조작할 수 있는 브라우저를 연결해준다 위 과정이 끝나면 구글 페이지를 연동해 보겠습니다 예시1 Enter문장 전까지만 입력하면 검색직전, 내용을 입력한 화면까지만 나옵니다 마지막으로 driver.quit( )이라는 문장을..

IT 프로그래밍/빅데이터 2021.03.04
1
더보기
프로필사진

Git> https://github.com/hyojeongpark Theme> 영화,책, IT 리뷰

  • 분류 전체보기 (62)
    • IT 프로그래밍 (59)
      • Java 자바 (0)
      • 빅데이터 (25)
      • Golang (9)
      • 하이퍼레저 패브릭 (3)
      • 블록체인 (12)
      • 개발일지 (4)
    • 지원&합격후기 (1)
    • 경제금융상식 (1)
    • 일상의 영감 (0)
      • 영화,책 리뷰 (0)

Tag

NoSQL종류, 로닌지갑, MongoDB, NoSQLdb, 넷플릭스추천, 몽고디비다운로드, 하이퍼레저 패브릭, 영화리뷰, mongodb사용법, 빅데이터기초, 몽고디비사용법, 파이썬데이터분석, mongodb다운로드, 콰이어트 플레이스2개봉, Golang, 빅데이터, 영화추천, 넷플릭스영화추천, 콰이어트 플레이스2, 빅데이터시각화,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2025/07   »
일 월 화 수 목 금 토
1 2 3 4 5
6 7 8 9 10 11 12
13 14 15 16 17 18 19
20 21 22 23 24 25 26
27 28 29 30 31

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

  • Github

티스토리툴바