400-885-9898
該職位已失效，看看其他機會吧
智聯APPAPP
舉報

爬蟲工程師

1.5-2萬
  • 北京石景山區
  • 1-3年
  • 本科
  • 全職
  • 招1人
查看更多相似職位

職位描述

JavaScriptHTMLCSSPython數據采集爬蟲開發分布式爬蟲人工智能計算機軟件
崗位職責：
1. 負責多類型網頁數據（動態/靜態）的自動化采集、解析及清洗結構化存儲，確保高覆蓋率與數據準確性，支撐業務復雜需求。
2. 處理諸如速率限制、動態內容和網站更改等挑戰。
崗位要求
1. 近期1年以上爬蟲經驗，熟悉最新爬蟲動向；
2. 精通Python及主流框架（Scrapy/PySpider二次開發經驗優先），掌握XPath/CSS/正則/BeautifulSoup等解析技術，能熟練處理JSON/XML等結構化數據。
3. 具備基礎反爬應對能力,能分析常見加密參數（如Token、Sign）熟悉請求頭偽裝等反封禁策略。
4. 熟悉Headless瀏覽器技術（Playwright/Puppeteer/Selenium），能處理大規模JS渲染頁面。
5. 了解JS逆向及熟悉常見加密算法（AES、RSA等），有主流平臺（如有小紅書筆記詳情頁API逆向或抖音X-Bogus參數破解）經驗優先。
6. 了解分布式消息隊列（Kafka/RabbitMQ）、高性能存儲（ES/HBase/Doris）及數據庫（MySQL/MongoDB/Redis）等
7. 熟悉APP逆向工具（JADX/Frida/Xposed），具備Android so庫分析或Hook開發經驗優先。
8. 注重代碼可維護性，有文檔編寫習慣。
查看全部

工作地點

北京石景山區晉元莊路5號院

職位發布者

李祺祥/人事經理

昨日活躍
立即溝通
久久久久国产一级毛片高清板