python,틱 톡 동 영상 일괄 다운로드 실현
여기 서 최근 핫 한 틱 톡 동 영상 을 예 로 들 어 API 를 이용 해 사용자 틱 톡 동 영상 대량 다운 로드 를 실현 한다.
주로 사용 되 는 모듈 은
1.requests 모듈;
2.bs4 모듈;
import requests
import bs4
import os
import json
import re
import sys
import time
from contextlib import closing
requests.packages.urllib3.disable_warnings()
class Spider():
def __init__(self):
self.headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.146 Safari/537.36'
}
print('[INFO]:Douyin App Video downloader...')
print('[Version]: V1.0')
print('[Author]: Charles')
#
def run(self):
user_id = input('Enter the ID:')
try:
int(user_id)
except:
print('[Error]:ID error...')
return
video_names, video_urls, nickname = self._parse_userID(user_id)
if nickname not in os.listdir():
os.mkdir(nickname)
print('[INFO]:Number of Videos <%s>' % len(video_urls))
for num in range(len(video_names)):
print('[INFO]:Parsing <No.%d> <Url:%s>' % (num+1, video_urls[num]))
temp = video_names[num].replace('\\', '')
video_name = temp.replace('/', '')
self._downloader(video_urls[num], os.path.join(nickname, video_name))
print('
')
print('[INFO]:All Done...')
#
def _downloader(self, video_url, path):
size = 0
download_url = self._get_download_url(video_url)
with closing(requests.get(download_url, headers=self.headers, stream=True, verify=False)) as response:
chunk_size = 1024
content_size = int(response.headers['content-length'])
if response.status_code == 200:
sys.stdout.write('[File Size]: %0.2f MB
' % (content_size/chunk_size/1024))
with open(path, 'wb') as f:
for data in response.iter_content(chunk_size=chunk_size):
f.write(data)
size += len(data)
f.flush()
sys.stdout.write('[Progress]: %0.2f%%' % float(size/content_size*100) + '\r')
sys.stdout.flush()
#
def _get_download_url(self, video_url):
res = requests.get(url=video_url, verify=False)
soup = bs4.BeautifulSoup(res.text, 'lxml')
script = soup.find_all('script')[-1]
video_url_js = re.findall('var data = \[(.+)\];', str(script))[0]
html = json.loads(video_url_js)
return html['video']['play_addr']['url_list'][0]
# user_id
def _parse_userID(self, user_id):
video_names = []
video_urls = []
unique_id = ''
while unique_id != user_id:
search_url = 'https://api.amemv.com/aweme/v1/discover/search/?keyword={}&count=10&type=1&aid=1128'.format(user_id)
res = requests.get(url=search_url, verify=False)
res_dic = json.loads(res.text)
uid = res_dic['user_list'][0]['user_info']['uid']
aweme_count = res_dic['user_list'][0]['user_info']['aweme_count']
nickname = res_dic['user_list'][0]['user_info']['nickname']
unique_id = res_dic['user_list'][0]['user_info']['unique_id']
user_url = 'https://www.douyin.com/aweme/v1/aweme/post/?user_id={}&max_cursor=0&count={}'.format(uid, aweme_count)
res = requests.get(url=user_url, verify=False)
res_dic = json.loads(res.text)
i = 1
for each in res_dic['aweme_list']:
share_desc = each['share_info']['share_desc']
if ' - ' == share_desc:
video_names.append(str(i) + '.mp4')
i += 1
else:
video_names.append(share_desc + '.mp4')
video_urls.append(each['share_info']['share_url'])
return video_names, video_urls, nickname
if __name__ == '__main__':
sp = Spider()
sp.run()
이상 이 바로 본 고의 모든 내용 입 니 다.여러분 의 학습 에 도움 이 되 고 저 희 를 많이 응원 해 주 셨 으 면 좋 겠 습 니 다.
이 내용에 흥미가 있습니까?
현재 기사가 여러분의 문제를 해결하지 못하는 경우 AI 엔진은 머신러닝 분석(스마트 모델이 방금 만들어져 부정확한 경우가 있을 수 있음)을 통해 가장 유사한 기사를 추천합니다:
로마 숫자를 정수로 또는 그 반대로 변환그 중 하나는 로마 숫자를 정수로 변환하는 함수를 만드는 것이었고 두 번째는 그 반대를 수행하는 함수를 만드는 것이었습니다. 문자만 포함합니다'I', 'V', 'X', 'L', 'C', 'D', 'M' ; 문자열이 ...
텍스트를 자유롭게 공유하거나 복사할 수 있습니다.하지만 이 문서의 URL은 참조 URL로 남겨 두십시오.
CC BY-SA 2.5, CC BY-SA 3.0 및 CC BY-SA 4.0에 따라 라이센스가 부여됩니다.