回顧Python/ target=_blank class=infotextkey>Python學習歷程,感慨良多,這門語言實在是太強了,當然,分支也很多,有的在做安全,有的在做數據,有的在做爬蟲,本文就筆者本身的爬蟲入門的小經驗分享給讀者,期待各位在學習python的路上披荊斬棘,取得更好的發展。
文章主要是利用requests,爬取500彩票網的大樂透數據(注:偶爾娛樂一下),然后利用csv寫入表格文件,讓大家對爬蟲的過程進行簡單的了解,廢話不多說,直接上代碼。
# -*- coding: UTF-8 -*-
import requests #引入,安裝直接命令行pip install requests
from bs4 import BeautifulSoup as bs
from collections import Counter
import csv
import os
# 發起請求
lst=[]
#獲取url ,如何獲取,另文介紹
url = 'http://datachart.500.com/dlt/history/newinc/history.php?start=07001'
#得到數據
data = requests.get(url).text
#解析
data = bs(data,'lxml')
data = data.find('tbody').find_all('tr')
for content in data:
row_tds = content.find_all('td')
lst.Append([row_tds[14].string,row_tds[0].string,row_tds[1].string,row_tds[2].string,row_td s[3].string,row_tds[4].string,row_tds[5].string,row_tds[6].string,row_tds[7].string])
#寫入表格
with open("Lottery_data.csv",'w') as csvfile:
writer = csv.writer(csvfile)
writer.writerow(['日期','期號','紅球1', '紅球2', '紅球3', '紅球4', '紅球5', '藍球1', '藍球2'])
writer.writerows(lst)
csvfile.close()
復制執行一下吧,原來python這么簡單,是不是小有成就感,關注不走失,帶你更多的了解python。