职位描述
工作职责:1. 全局统筹并建设高性能、高对抗的分布式群控爬虫采集平台的建设;2. 构建亿级爬虫平台对应的账号、网络、风控等基础设施;3. 负责公司的重要爬虫项目的方案设计,工程实现,数据源以海外电商为主,如亚马逊、tiktok、google等;4. 协助团队对数据平台存储的海量数据进行挖掘研究;5. 负责带领其他初级爬虫工程师协同工作。 任职资格:1. 计算机本科相关专业,熟悉计算机基础知识;2. 搭建过亿级数据采集平台,熟悉分布式采集/群控原理,了解分布式调度,有百亿级数据处理经验者优先;3. 有网络安全意识,了解多种破解反爬策略,具备识别和规避风控风险的能力;4. 熟练掌握至少一门编程语言,java/python/go不限,3年以上爬虫或反爬工作经验5. 有海外商品数据抓取经验和国内数据抓取经验,擅长高并发快速采集;6. 熟悉常用的爬虫框架和Hook工具frida、xposed,逆向工具IDA等,有国内外中大型电商数据爬取经验;7. 有自己的一套爬虫工具库,例如js反混淆脚本和爬虫采集框架,快速开发基于rpc或rpa的爬虫工具;8. 掌握验证码识别技术、js逆向,反混淆等常用反爬技能;9. 良好的沟通能力,抗压能力强,能独立解决开发过程遇到的各类问题。福利说明:1.广阔发展空间,条件优秀者可分配股票期权;2.五险一金+意外险+健全的薪酬晋升体系;3.带薪年假/病假、年度体检、国家法定假日及过节福利等。
企业介绍
集团于一九九零年在香港成立,进入中国内地房地产市场投资30年。集团投资已经遍布于中国东北、华北、华中、华东、华南以及西南六大经济区域的主要城市。近十年积极开拓多元化业务, 目前已有互联网服务,红酒庄园,以及人工智能等成熟业务。为了配合AI科技业务板块的发展,急需招聘大量人才加入成就团队的发展与进化。集团于1997年在香港联合交易所主板上市。2005—2017年连续十三年入选“中国房地产百强企业” ;2012—2016年连续五年位居“中国房地产上市公司综合实力50强”;2007—2009年连续三年荣获“中国蓝筹地产企业”称号。