這篇文章主要介紹了python requests抓取one推送文字和圖片代碼實例,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下
requests是Python中一個第三方庫,基于 urllib,采用 Apache2 Licensed 開源協議的 HTTP 庫。它比 urllib 更加方便,可以節約我們大量的工作,完全滿足 HTTP 測試需求。接下來將記錄一下requests的使用:
from bs4 import BeautifulSoupfrom lxml import htmlimport xmlimport requests#下載圖片函數def download_img(url,name): """" 下載指定url的圖片 url:圖片的url; name:保存圖片的名字 """ try: respone = requests.get(url) f_img = respone.content path = r'C:/Users/86131/Desktop/itchat/send_file/images//%s.jpg'%(name) with open(path, "wb")as f: f.write(f_img) except Exception as e: print("---------地址出錯------------")url_list = []f = requests.get("http://wufazhuce.com/")# #打印網頁內容# print(f.content.decode())soup = BeautifulSoup(f.content,"lxml")try: first_div = soup.find("div",attrs={'id':'main-container'}).find('div',attrs={'class':'carousel-inner'}) a_all = first_div.find_all('a') for i in a_all: url_list.append(i.attrs['href'])except Exception as e: print("---------出錯------------")#得到one的首頁推薦頁面f_1 = requests.get(url_list[0])#打印網頁內容# print(f_1.content.decode())soup_1 = BeautifulSoup(f_1.content,"lxml")try: second_div = soup_1.find("div",attrs={'id':'main-container'}).find('div',attrs={'class':'one-cita-wrapper'}) third_div = soup_1.find("div",attrs={'id':'main-container'}).find('div',attrs={'class':'one-imagen'}) #獲得時期值 now_month = second_div.find('p',attrs={'class':'may'}).text now_one_day = second_div.find('p',attrs={'class':'dom'}).text #獲得圖片的url img_url = third_div.find('img').attrs['src'] #獲得一段話并去除開頭的空格 one_text = second_div.find("div",attrs={'class':'one-cita'}).text.strip() #將獲得日期拼接 now_day = now_one_day +' '+ now_month #調用函數下載圖片 download_img(img_url, now_day)except Exception as e: print("---------出錯------------")
以上就是本文的全部內容,希望對大家的學習有所幫助,也希望大家多多支持武林網之家。
新聞熱點
疑難解答