刷新时间:10-08
数据采集工程师 6-10K 参考工资
山东省烟台市莱山区  |  应届毕业生 |  本科  |  年龄不限  |  招2人  |  校招
五险一金节日福利双休8小时工作制
...
收藏 投诉
专业要求
计算机类
岗位职责
MongoDBMySQLRedis

1、 负责Web数据、移动应用数据的爬取、清洗、解析、入库;
2、 研究主流网站和APP反爬机制,寻找应对方案;
3、 负责Android、iOS应用的逆向工作,能正向还原关键算法;
4、 通过技术创新让数据为业务发展带来价值。

岗位要求

1、熟悉爬虫原理及流程,使用过至少一个主流爬虫框架并有实践经验;
2、有反爬对抗经验,例如IP封锁、验证码、JS加密、行为验证等;
3、熟练掌握数据抽取、清洗等技术;
4、熟练使用MySQL、MongoDB、Elasticsearch、Redis等数据库及缓存中间件;
5、熟悉分布式、多线程、高并发及高可用的设计、编码和调优,并有成熟实践经验;
6、熟悉Hadoop生态相关技术,如Hive、HBase、Spark、Flink、ClickHouse等,有业务实际落地经验;
7、熟悉Docker、Kubernetes 等容器平台部署。
8、具有较强的逻辑分析能力、沟通协作能力、学习能力和分析、解决问题的能力,具备团队合作精神和高度的责任心,能适应一定工作压力。

工作地址
山东省烟台市莱山区·烟台中科网络技术研究所
HR信息
马老师
3日内活跃
人事
与HR聊聊
安全警示
立即投诉

在求职过程中如果遇到扣押证件、收取押金、提供担保、强迫入股集资、解冻资金、诈骗传销、求职歧视、黑中介、人身攻击、恶意骚扰、恶意营销、虚假宣传或其他违法违规行为。请及时保留证据,立即向平台举报投诉,必要时可以报警、起诉,维护自己的合法权益。

公司其他职位 查看本公司更多职位
前端工程师
5-7K 烟台市-高新区 | 年龄不限 | 本科
科研助理(实习生)
2-3K 烟台市-高新区 | 年龄不限 | 硕士
运维工程师
5-7K 烟台市-高新区 | 年龄不限 | 本科
Java工程师
6-10K 烟台市-高新区 | 年龄不限 | 本科
课题负责人
7-9K 烟台市-高新区 | 年龄不限 | 硕士
技术负责人
15-25K 烟台市-高新区 | 年龄不限 | 本科
计算机服务(系统/数据/维护) 计算机软件 互联网/电子商务
事业单位
101~200人
烟台市高新区烟台高新区科技大道69号
感兴趣的职位
烟台市 | 1-2年 | 本科
烟台朗坤水务有限公司
门卫 2.5-3K
烟台市 | 经验不限 | 学历不限
烟台希尔德材料科技有限公司
烟台市 | 经验不限 | 初中
烟台市东上电子有限公司
烟台市 | 3-5年 | 高中
烟台市东上电子有限公司
风险提示
企业基本资料已通过 平台认证
以上资料仅供参考,请求职者 规避求职风险