【Github】项目名:Kr1s77/awesome – python – login – model:python模拟登录大型网站与简单爬虫
项目简介
这一项目包含python模拟登录一些大型网站的程序以及一些简单的爬虫示例。模拟登陆基本采用直接登录或者使用selenium+webdriver的方式,对于登录难度大的网站(如qq空间、bilibili等)采用selenium相对轻松。登录后可维护cookie,调用requests或scrapy进行数据采集。项目中的程序都是使用python3编写。
项目目的
为使用者提供python模拟登录大型网站的示例以及简单的爬虫示例,以帮助使用者进行相关开发学习与研究。
核心技术
主要采用selenium+webdriver进行模拟登录,部分模拟登录基于js逆向。在数据采集方面,登录后通过维护cookie,结合requests或者scrapy等工具进行数据采集。
项目总结
这个项目为想要进行python模拟登录和简单爬虫开发的人员提供了很好的示例资源。不过项目在验证码处理方面存在不足,并且可能会因为网站策略或者样式改变导致代码失效。但项目持续更新,大家如果有问题可以直接提交Issues,欢迎提交PR。希望大家如果觉得项目有用,记得给个star。也期待大家在评论区留言参与对该项目的讨论。
项目地址
数据统计
数据评估
关于Kr1s77/awesome-python-login-model:python模拟登录大型网站与简单爬虫特别声明
本站链氪巴士提供的Kr1s77/awesome-python-login-model:python模拟登录大型网站与简单爬虫都来源于网络,不保证外部链接的准确性和完整性,同时,对于该外部链接的指向,不由链氪巴士实际控制,在2024年12月5日 上午12:00收录时,该网页上的内容,都属于合规合法,后期网页的内容如出现违规,可以直接联系网站管理员进行删除,链氪巴士不承担任何责任。
相关导航
暂无评论...