Python

已有0人投递

半日

10k-30k/月

周期：1-3个月

经验：5年以上

运维/技术支持

网络工程师

1.熟练使用python编程语言。
2.理解基本的数据结构，能够优化爬虫性能和效率。
3.理解HTTP、HTTPS等网络协议。
4.能够发送HTTP请求并处理响应，处理Cookie、Session等。
5.熟悉XPath语法，用于从HTML中提取所需信息。
6.掌握正则表达式，用于从文本中提取需要的数据。
7.了解常用的数据库系统，如MySQL，能够将爬取到的数据存储到数据库中。
8.了解常见的反爬虫机制，能够应对反爬虫策略，如限制访问频率、验证码等。
9.掌握常用的爬虫库包括但不限于Requests、Scrapy、Selenium。
10.掌握任务调度和分发技术，确保爬虫任务的高效运行。
11.理解HTML和CSS的基本结构和语法。
12.熟悉HTML解析库，如Beautiful Soup、 lxml等，用于解析网页内容。
13.了解逆向工程以及抓包工具, 能捕获app与服务器之间的通信, 有app爬虫经验。

雇佣流程

了解更多

{% activity.content %}

{% index+1 %}