使用Scrapy框架爬取豆瓣电影Top250的数据爬虫逻辑:在豆瓣电影top250页面中爬取详情页链接,并生成Request请求,随后在详情页中定位数据并爬取使用SQLAlchemy模块建立数据模型,并将爬取的数据分别保存至MySQL数据库和json文件项目开源地址:https://github.com/psyhero/douban_pro.git
浏览82
点赞0
评论
2024-11-07 10:06:40
项目采用前后端不分离的方式构写,实现用户注册、登录、下订单等功能Web运行逻辑:用户登录>>下订单并支付>>selenium生成driver执行任务>>返回任务完成的状态码并通知用户MySQL数据:user表单,订单表单,任务表单,spider爬取的user-agent表单、proxy表单项目开源地址:https://github.com/psyhero/flask-shring.git
浏览74
点赞0
评论
2024-11-07 10:05:37
本项目采用Vue3框架,复写了网易云音乐的web网页,主要内容:1、使用多级路由导航,使用pinia状态管理,使用defineProps实现父子组件通信;2、使用FetchAPI获取网易云音乐的随机歌曲以作调试;3、数据动态生成,但目前皆来源于网易云音乐站点。项目开源地址:https://github.com/psyhero/vue_music163.git
浏览60
点赞0
评论
2024-11-07 10:04:08