…
‘’’
import requests
import parsel
import csv
f = open(‘4399游戏.csv’, mode=‘a’, encoding=‘utf-8-sig’, newline=‘’)
csv_writer = csv.DictWriter(f, fieldnames=[‘游戏地址’, ‘游戏名字’])
csv_writer.writeheader()
for page in range(1, 106):
url = ‘http://www.4399/flash_fl/5_{}.htm’.format(page)
headers = {
‘User-Agent’: ‘Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36’
}
response = requests.get(url=url, headers=headers)
response.encoding = response.apparent_encoding
selector = parsel.Selector(response.text)
lis = selector.css(‘#classic li’)
for li in lis:
dit ={}
data_url = li.css(‘a::attr(href)’).get()
new_url = ‘http://www.4399’ + data_url.replace(‘http://’, ‘/’)
dit[‘游戏地址’] = new_url
title = li.css(‘img::attr(alt)’).get()
dit[‘游戏名字’] = title
print(new_url, title)
csv_writer.writerow(dit)
f.close()
数据还是很多的，这里只保存了32548条数据
感谢每一个认真阅读我文章的人，看着粉丝一路的上涨和关注，礼尚往来总是要有的：
① 2000多本Python电子书（主流和经典的书籍应该都有了）
② Python标准库资料（最全中文版）
③ 项目源码（四五十个有趣且经典的练手项目及源码）
④ Python基础入门、爬虫、web开发、大数据分析方面的视频（适合小白学习）
⑤ Python学习路线图（告别不入流的学习）
网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。
需要这份系统化学习资料的朋友，可以戳这里无偿获取
一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！
…
‘’’
import requests
import parsel
import csv
f = open(‘4399游戏.csv’, mode=‘a’, encoding=‘utf-8-sig’, newline=‘’)
csv_writer = csv.DictWriter(f, fieldnames=[‘游戏地址’, ‘游戏名字’])
csv_writer.writeheader()
for page in range(1, 106):
url = ‘http://www.4399/flash_fl/5_{}.htm’.format(page)
headers = {
‘User-Agent’: ‘Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36’
}
response = requests.get(url=url, headers=headers)
response.encoding = response.apparent_encoding
selector = parsel.Selector(response.text)
lis = selector.css(‘#classic li’)
for li in lis:
dit ={}
data_url = li.css(‘a::attr(href)’).get()
new_url = ‘http://www.4399’ + data_url.replace(‘http://’, ‘/’)
dit[‘游戏地址’] = new_url
title = li.css(‘img::attr(alt)’).get()
dit[‘游戏名字’] = title
print(new_url, title)
csv_writer.writerow(dit)
f.close()
数据还是很多的，这里只保存了32548条数据
感谢每一个认真阅读我文章的人，看着粉丝一路的上涨和关注，礼尚往来总是要有的：
① 2000多本Python电子书（主流和经典的书籍应该都有了）
② Python标准库资料（最全中文版）
③ 项目源码（四五十个有趣且经典的练手项目及源码）
④ Python基础入门、爬虫、web开发、大数据分析方面的视频（适合小白学习）
⑤ Python学习路线图（告别不入流的学习）
网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。
需要这份系统化学习资料的朋友，可以戳这里无偿获取
一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！