當前位置: 首頁 » 北京 » [北京]自如

[北京]自如

崗位職責:

1、參與hue、airflow等大數據相關組件的二次開發,參與基于k8s和docker的服務自動化部署的開發

2、負責設計和開發分布式爬蟲系統,進行多平臺多終端信息的抓取和分析;

3、實現大規模文本、圖像的抓取及數據清洗工作;

4、大數據相關組件告警功能的設計與開發


任職要求:

1、全日制統招本科及以上學歷, 計算機相關專業在校生;

2、熟練掌握python的開發

3、能夠解決封賬號、封IP采集等問題,解決網頁抓取、信息抽取等問題;

4、熟悉網頁抓取原理及技術,能夠總結分析不同網站,網頁的結構特點及規律;

5、熟悉Mysql、Redis、Nosql等數據庫;  

6、熟悉常見的數據結構知和基本的算法復雜度概念。

加分項(滿足其一即可):

1、有驗證碼破解,反爬,分布式爬蟲架構,數據挖掘,搭建數據倉庫經驗;

2、熟悉Selenium、PhantomJS 、WebDriver等技術或hue、airflow等大數據組件;

吸引力:

  除了爬蟲之外,可以參加到大數據相關組件的開發,廣闊的成長空間,還有機會參與到算法組的開發

簡歷發送到 liut23@ziroom.com

上一條: 沒有了 下一條: [北京]搜狗
相關專業最新招聘信息
  1. ·[河南]安陽學院 2021招聘
  2. ·[南京]中國旅游集團旅行服務有限公司 開發崗
  3. ·[山東]德州市勞動服務技工學校 2021校園招聘
  4. ·[北京]中國旅游集團旅行服務有限公司 系統推廣與支持
  5. ·[全國]航天宏圖技術股份有限公司 2021招聘實習生

關于我們 | 合作伙伴 | 出版物 | 觸屏版 | 友情鏈接 | 聯系我們 | 違法和不良信息舉報 | 幫助指南

網站備案/許可證號:滬ICP備12015550號-13|上海市公安局徐匯分局網監中心備案編號:3101040220

上海市反電信網絡詐騙中心防范勸阻電話和短信統一專號:962110,網民接到962110電話,請立即接聽。

Copyright ©前錦網絡信息技術(上海)有限公司版權所有

亚洲久久综合爱久久_无码中文av有码中文av_囗交口爆国产在线视频