Datawhale 제1 2 기 파티 학습 - Python 파충류 프로 그래 밍 실천 Task 04: 큰 작업: 뉴스 를 얻 기;높이 뽑다: 어떤 파충류

935 단어 Datawhale 파티 학습학습 기록
작업:
  • ajax 로드 알 아 보기
  • chrome 개발 자 도 구 를 통 해 네트워크 요청 을 모니터링 하고 분석
  • selenium 으로 파충류 완성
  • 구체 적 인 절 차 는 다음 과 같다.https://news.qq.com/ 의 핫 이 슈 정선
    • 의문:
  • url 요청 으로 얻 은 데 이 터 는 ajax 를 통 해 얻 은 것 이 라 고 어떻게 판단 합 니까? 이 진실 한 url 을 어떻게 압 니까?
  • ajax 가 얻 은 데이터 획득 에 어떤 팁 이 있 습 니까?
  • Beautiful Soup, etree, xpath 는 어떻게 더 유연 하 게 혼용 합 니까?

    • 코드: (요구 에 미 달)
    def get_page_source():
    # driver = webdriver.Chrome(".chromedriver.exe")
    driver = webdriver.Chrome()
    driver.get("https://news.qq.com/")
    time.sleep(2)
    page_source = driver.page_source
    soup = BeautifulSoup(page_source)
    # print(soup.prettify())
    ele_list = soup.select('.detail > h3 > a')
    # print(ele_list)
    for ele in ele_list:
        print(type(str(ele)), str(ele))
        # print(etree.HTML(str(ele)).xpath('text()'))

get_page_source()
    oracle 데이터베이스 백업 스크립트
    뮤 직 비디오 가 자동 재생 인 자 를 설정 한 건 가요? 재생 이 안 되 는 건 가요?

    좋은 웹페이지 즐겨찾기

    개발자 우수 사이트 수집

    개발자가 알아야 할 필수 사이트 100선 추천 우리는 당신을 위해 100개의 자주 사용하는 개발자 학습 사이트를 정리했습니다
    best100-homepage