Python 학습 노트 (3): 전세 정보 얻 기
from bs4 import BeautifulSoup
import requests
# url
urls = ['http://bj.xiaozhu.com/search-duanzufang-p{}-0/'.format(i) for i in range(1,10)]
#
def get_lorder_sex(class_name):
if class_name == ['member_girl_ico']:
return ' '
elif class_name == ['member_boy_ico']:
return ' '
#
def get_links(url):
wq_data = requests.get(url)
soup = BeautifulSoup(wq_data.text,'lxml')
links = soup.select('#page_list > ul > li > a')
for link in links:
href = link.get('href')
get_attraction(href)
def get_attraction(url,data=None):
wb_data = requests.get(url)
# lxml
soup = BeautifulSoup(wb_data.text,'lxml')
#Chrome , , , ,Copy Css Path, :nth-child()
titles = soup.select('body > div.wrap.clearfix.con_bg > div.con_l > div.pho_info > h4 > em')
adds = soup.select('body > div.wrap.clearfix.con_bg > div.con_l > div.pho_info > p > span')
rends = soup.select('div.day_l > span')
imgs = soup.select('div.pho_show_l > div.pho_show_big > div > img')
img_householders = soup.select('div.js_box.clearfix > div.member_pic > a > img')
names = soup.select('div.js_box.clearfix > div.w_240 > h6 > a')
genders = soup.select('div.js_box.clearfix > div.w_240 > h6 > span')
for title,add,rend,img,img_householder,name,gender in zip(titles,adds,rends,imgs,img_householders,names,genders):
# ,get_text() ,get() ,get() ,
data = {
'title':title.get_text(),
'add':add.get_text(),
'rend':rend.get_text(),
'img':img.get('src'),
'img_householder':img_householder.get('src'),
'name':name.get_text(),
'gender':get_lorder_sex(gender.get('class'))
}
print(data)
for single_url in urls:
get_links(single_url)
총결산
이 내용에 흥미가 있습니까?
현재 기사가 여러분의 문제를 해결하지 못하는 경우 AI 엔진은 머신러닝 분석(스마트 모델이 방금 만들어져 부정확한 경우가 있을 수 있음)을 통해 가장 유사한 기사를 추천합니다:
다양한 언어의 JSONJSON은 Javascript 표기법을 사용하여 데이터 구조를 레이아웃하는 데이터 형식입니다. 그러나 Javascript가 코드에서 이러한 구조를 나타낼 수 있는 유일한 언어는 아닙니다. 저는 일반적으로 '객체'{}...
텍스트를 자유롭게 공유하거나 복사할 수 있습니다.하지만 이 문서의 URL은 참조 URL로 남겨 두십시오.
CC BY-SA 2.5, CC BY-SA 3.0 및 CC BY-SA 4.0에 따라 라이센스가 부여됩니다.