python urllib爬取百度云连接的实例代码

翻看自己以前写的程序，发现写过一个爬取盘多多百度云资源的东西，完全是当时想看变形金刚才自己写的，而且当时第一次接触python大概写了有2天才搞出来这个程序，学习python语言，可以看得出来那时候的代码写的真的low。虽然现在也不怎么样，哈哈，一直学习中，不做过多解释，上图上代码，因为变量的声明是什么我自己也忘了（手动傲娇），连写入文件当时都不会哈哈哈哈哈哈哈哈，也不知道class中可以通过init初始化，唉学习python原来我学到了这么多东西，感谢python

from bs4 import BeautifulSoup
import urllib
import requests
import re

adr =[]

''''对搜素资源名字进行url编码'''
search_text =raw_input('请输入搜索资源名：')
search_text = search_text.decode('gbk')
search_text = search_text.encode('utf-8')
search_text = urllib.quote(search_text)


''''获取文件地址'''
home = urllib.urlopen('http://www.panduoduo.net/s/name/'+search_text)


'''获取百度云地址'''
def getbaidu(adr):
  for i in adr:
    url = urllib.urlopen('http://www.panduoduo.net'+i)
    bs = BeautifulSoup(url)
    bs1 = bs.select('.dbutton2')
    href = re.compile('http\%(\%|\d|\w|\/\/|\/|\.)*')
    b = href.search(str(bs1))
    name = str(bs.select('.center')).decode('utf-8')
    text1 = re.compile('\<h1\sclass\=\"center"\>[\d|\w|\D|\W]*\</h1\>')
    text2 = text1.search(name)
    rag1 = re.compile('\>[\d|\w|\D|\W]*\<')
    if text2:
      text3 = rag1.search(text2.group())
      if text3:
        print text3.group()
    if b:
      text = urllib.unquote(str(b.group())).decode('utf-8')
      print text

'''初始化'''
def init(adr):
  soup = BeautifulSoup(home)
  soup = soup.select('.row')
  pattern = re.compile('\/r\/\d+')
  for i in soup:
    i = str(i)
    adress = pattern.search(i)
    adress = adress.group()
    adr.append(adress)


print 'running---------'    
init(adr)
getbaidu(adr)

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持。

# python爬取百度云 # python # urllib爬取 # 爬取百度云连接 # 用python下载百度文库的代码 # Python爬虫：通过关键字爬取百度图片 # python爬虫教程之爬取百度贴吧并下载的示例 # 教你用python3根据关键词爬取百度百科的内容 # Python3实现爬取指定百度贴吧页面并保存页面数据生成本地文档的方法 # Python实现爬取百度贴吧帖子所有楼层图片的爬虫示例 # python爬取网站数据保存使用的方法 # Python实现爬取知乎神回复简单爬虫代码分享 # python爬虫实战之爬取京东商城实例教程 # Python实现的爬取百度文库功能示例 # 也不 # 这么多 # 可以通过 # 看得 # 请输入 # 那时候 # 写了 # 不做 # 想看 # 写过 # 大家多多 # 哈哈哈哈哈哈 # 我学 # 图上 # 第一次接触 # pre # py # import # brush # BeautifulSoup

返回目录在线咨询

上一篇：在哪搜SublimeJ JS技巧_React组件快捷生成法
下一篇：打造吸引用户的网站设计：关键步骤与技巧解析

您的项目需求

*请认真填写需求信息，我们会在24小时内与您取得联系。

全网整合营销服务商

python urllib爬取百度云连接的实例代码

您的项目需求