首页 - 神途资讯 > 4399小游戏童年的乐趣，python爬取4399全站小游戏

4399小游戏童年的乐趣，python爬取4399全站小游戏

发布于：2024-04-12 作者：admin 阅读：125

前言

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。

PS：如有需要学习资料的小伙伴可以加点击下方链接自行获取

免费学习资料以及 *** 流解答点击即可加入

基本环境配置

相关模块pip安装即可

'''
动作类游戏：http://www.4399.com/flash_fl/2_1.htm
体育类游戏：http://www.4399.com/flash_fl/3_1.htm
益智类游戏：http://www.4399.com/flash_fl/5_1.htm
射击类游戏：http://www.4399.com/flash_fl/4_1.htm
...
'''

import requests
import parsel
import csv
f = open('4399游戏.csv', mode='a', encoding='utf-8-sig', newline='')
csv_writer = csv.DictWriter(f, fieldnames=['游戏地址', '游戏名字'])
csv_writer.writeheader()
for page in range(1, 106):
    url = 'http://www.4399.com/flash_fl/5_{}.htm'.format(page)
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
    }
    response = requests.get(url=url, headers=headers)
    response.encoding = response.apparent_encoding
    selector = parsel.Selector(response.text)
    lis = selector.css('#classic li')
    for li in lis:
        dit ={}
        data_url = li.css('a::attr(href)').get()
        new_url = 'http://www.4399.com' + data_url.replace('http://', '/')
        dit['游戏地址'] = new_url
        title = li.css('img::attr(alt)').get()
        dit['游戏名字'] = title
        print(new_url, title)
        csv_writer.writerow(dit)
f.close()

数据还是很多的，这里只保存了32548条数据

二维码

扫一扫关注我们

版权声明：本文内容由互联网用户自发贡献，本站不拥有所有权，不承担相关法律责任。如果发现本站有涉嫌抄袭的内容，请告知我们，本站将立刻删除涉嫌侵权内容。

上一篇：客服中心

下一篇：良心厂商的良心DLC，《巫师3：血与酒》画质将更上一层楼

相关文章

本站资讯|联系我们|RSS订阅|网站地图

百度关键词：神途,神途手游,神途发布网

二维码

Copyright © 2022 www.5wst.com All right reserved. 赣ICP备2022000132号-15