[上海]上海交通大学电子信息与电气工程学院智能物联网中心实验室
- 发布时间：2020-07-30
- 工作地点：上海
- 职位类型：全职
- 来源：上海交通大学
- 职位：项目助理
电子信息与电气工程学院智能物联网中心实验室项目代理招聘
| 招聘岗位：项目助理 | |
| 招聘人数：1 名 | |
| 聘用方式 | |
| 项目聘用A | |
| 招聘条件 | |
|
大学本科(简称“大学”)及以上学历,学士及以上学位
一年以上工作经验； 精通python开发，熟悉使用scrapy、selenuim等常用开源爬虫框架； 熟悉HTTP协议、HTML、DOM，并有一定的JavaScript能力； 熟练使用Xpath、正则表达式或Beautiful Soup任一种解析框架； 有丰富的应对反爬虫的经验，例如合理使用IP 池、验证码识别技术等； 熟练使用splash、浏览器内核等工具解析动态页面； 熟悉多线程、网络编程以及分布式爬虫架构开发场景 熟悉使用Redis和任意一种常见的分布式消息队列； 熟练使用模拟登陆、UA池、动态代理、IP池等常规伪装手段； 熟悉常规反爬虫手段以及常见的解决方案，有一定的逆向工程能力； 熟练使用Mysql，熟悉Nosql数据库等，有大数据开发相关经验更佳； 熟悉Ubuntu等Linux系统，熟练使用shell工具； |
|
| 岗位职责 | |
|
管理建设数据获取、爬虫平台框架，负责爬虫系统规划以及相应架构设计；
负责设计和开发网络爬虫应用，包括调度、抓取、入库等内容；
负责现有爬虫核心算法和策略优化；
网络爬虫架构设计、功能开发及优化；
参与建设平台治理统一的数据体系，能独立完成项目的系统分析，根据开发规范和数据模型设计实现数据开发任务，保证数据质量；
参与数据仓库的设计和研发，进行海量数据模型设计、数据ETL开发；
参与数据产品及应用的数据研发，发觉数据业务价值，助力数据化运营业务。
|
|
| 岗位待遇 | |
|
面议 |
|
| 其他 | |
| 应聘人请在9月1日之前完成系统中应聘（请确保接收邮箱填写正确），同时将个人简历发至以下联系人邮箱（姓名 广告名称）。 | |
| 联系方式 | |
|
联系人：贾雨葶 TEL：； E-mail：acemap@cs.sjtu.edu.cn 联系地址：上海市闵行区东川路800号上海交通大学电信群楼1-432 |
|
