街拍视频和街拍第一站的爬虫 |
您所在的位置：网站首页 › 街拍第一站2004下一站 › 街拍视频和街拍第一站的爬虫 |
街拍视频和街拍第一站的爬虫
|
以下就是街拍视频爬虫的代码。 爬的是 www.xxokok.com 可以自由选择街拍视频还是街拍图片。 代码全自动实现。非常方便。 实现了爬虫街拍第一站的功能。
#!usr/bin/env python # -*- encoding:utf-8 -*- MONGO_URL = 'localhost' MONGO_DB = 'toutiao' MONGO_TABLE = 'toutiao' GROUP_START = 1 GROUP_END = 10 KEYWORD = '街拍' import requests from urllib.parse import urlencode from requests.exceptions import RequestException from flask import json from bs4 import BeautifulSoup import re from hashlib import md5 import os import pymongo from multiprocessing import Pool client = pymongo.MongoClient(MONGO_UR |
【本文地址】