岗位信息
1:能够绕过各种反爬,js逆向解密,破解绝大部分加密参数和加密字体等加密信息;
2:精通市面上各个爬虫框架scrapy-redisscrapy- rabbitmq,scrapy,
3:pyspiderseleniumappiumuiautomator2、airtest等手机app爬虫框架:
4:精通使用各个爬虫监控管理框架scrapyd,
spiderkeepergerapy;熟练使用linuxmacos,windows5:会使用后端框架django,flask;
6:精通Redis,Rabbitmg,MongoDB,MySQL, HBase等主流数据库&MQ:
7:精通Fiddlercharlesmitmproxy(mitmdump)抓包8:精通selenium,
PhantomjsChromeDriver,AirtestAppium pyppetter,playwright等自动化工具;
9:精通beautifulsoup,recssxpath等网页数据抽取;
运用过:长效代理,短期代理,桌面代理,隧道代理,自建代理ip;
10:熟悉前端html,css,js等语言;熟练使用 Markdown,Xmind;11:精通python;