V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
eb8org
V2EX  ›  酷工作

[招聘] Python / Java 爬虫工程师(在家办公)

  •  
  •   eb8org · 2021-11-29 12:08:59 +08:00 · 1302 次点击
    这是一个创建于 850 天前的主题,其中的信息可能已经有所发展或是发生改变。
    岗位职责:
    1 、负责爬虫的设计和开发;
    2 、负责网页和 APP 数据的解析和入库;
    3 、负责爬虫的部署,调度,维护等工作;
    4 、负责抓取数据的深度提取和挖掘。
    5 、负责寻找同类型资源

    职位要求:
    1 、计算机或相关专业本科以上学历;
    2 、熟悉 python/java 语言任意一种,1 年以上爬虫经验
    3 、要求熟练使用 Python , 熟练使用 scrapy 框架,以及 scrapy-redis 分布式框架;
    4 、熟悉 JavaScript ,java , 能读懂 JS ,java 代码;
    5 、精通网页抓取原理及技术的实现细节,精通 Xpath 和正则表达式,从结构化的和非结构化的数据中获取信息,对网页抓取、信息抽取、去重、清洗、匹配有一定经验;
    6 、至少熟悉一种数据库,mysql 、mongodb ,redis ,hive ,ES ;
    7 、有数据分析或信息检索开发经验者优先;
    8 、有用 hadoop ,spark 等大数据组件做过海量数据处理会优先考虑;
    9 、有 APP 反编译经验的优先;
    10 、熟练使用 docker 的优先

    支持在家办公

    待遇 15K
    邮箱 : [email protected]
    1 条回复    2021-11-29 12:50:00 +08:00
    Abbeyok
        1
    Abbeyok  
       2021-11-29 12:50:00 +08:00
    简历已发
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   3030 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 14:55 · PVG 22:55 · LAX 07:55 · JFK 10:55
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.