爬虫技术经理职位描述与岗位职责任职要求.docxVIP

PAGE 1 PAGE 1 爬虫技术经理职位描述与岗位职责任职要求  职位描述：  职位描述：  1、负责核心爬虫系统架构设计、数据库设计；  2、负责网络爬虫的核心技术研究和开发，参与各种核心搜寻策略、算法、数据聚类、重组的设计与开发；  3、设计策略和算法，提升网页抓取的效率和质量；  4、分析爬虫系统的技术缺陷，对策略架构做出合理地调整和改进；  岗位要求：  1、全日制本科及以上学历，计算机相关专业；  2、精通Java、C#、Go、Python其中一种，熟识常用的信息抓取策略和数据重组算法；  3、精通信息抓取和整合技术，从结构化的和非结构化的数据中获取信息；  4、熟识代理技术、验证码技术；  5、熟识Mongodb、HBase、HIVE等NoSQL数据库，了解关系型数据库优先。  篇2：爬虫开发经理职位描述与岗位职责任职要求  职位描述：  职位诱惑：  全球项目、高薪资、高福利、国际团队  职位描述：  if(your_passions.includes(coding)){  switch(your_stacks){  caseNode.js:  casePython:  caseKubernetes:  caseServerless:  console.log(JoinAfterShip);  break;  }  }  岗位职责  1、负责技术方案的评审，技术架构的设计、优化、重构，对系统的稳定性负责；  2、负责团队建设与管理工作，组建和培育人才梯队，提升团队技术水平；  3、定期组织对内对外的技术培训、活动，提升团队技术氛围和企业品牌形象。  岗位要求  1、统招本科及以上学历，CET6及以上，英语听说读写娴熟；  2、熟识Git/GitHub，通信协议TCP/HTTP及RESTful标准；  3、五年及以上Python爬虫开发工作经验，一年及以上团队管理经验；  4、JavaScript基础扎实，有Scrapy等使用经验，有MySQL,Redis或MongoDB等相关数据库使用经验。  加分项  1、有CI/CD自动化测试经验；  2、有使用Docker、Kubernetes、AWS或GCP云计算经验；  3、有写Blog的习惯，活跃技术社区，参与开源项目等；  4、有代码洁癖，对代码精益求精，对技术有极客热忱；  5、有软件著作权申请，有专利创造申请。  为什么加入我们  1、极客氛围:拥抱开源技术，实践机敏开发；  2、必威体育精装版技术:Kubernetes,Serverless,TensorFlow,Microservice；  3、特色福利:每天下午茶，学习成长基金,供应MacBookPro；  4、多元文化:团队来自全球十几个国家；  5、龙头企业:海外知名企业，细分领域第一；  6、朝阳行业:B2B企业级系统，国际性SaaS平台。  篇3：网络爬虫工程师职位描述与岗位职责任职要求  职位描述：  职责描述：  1，负责网络爬虫系统的设计与开发  2，对爬取的网页信息进行数据抽取，清洗和去重等工作  任职要求：  1、2年及以上网络爬虫开发经验，本科及大专学历，计算机相关专业,  2、积极、沟通顺畅，工作专心负责  3、扎实的编程能力，熟识常用算法和数据结构等基础学问  4、娴熟把握开发语言Java或C/C