崗位職責 : 1、負責各類社媒平臺、電商平臺、新聞論壇站點，pc和app端數據抓??； 2、負責對爬取的數據進行分類和解析，并維護相關數據字段標準，形成統一的結構化數據； 3、負責爬蟲技術攻關和平臺運維相關工作； 任職要求: 1、至少一年的分布式爬蟲開發經驗； 2、熟悉爬蟲開發，熟練掌握HTML、DOM、XPath，熟悉fiddler、charles等抓包工具； 3、熟悉linux平臺，熟練掌握Python/java/shell/http協議，掌握git、maven、svn等工具和實踐，注重工程規范； 4、性格開朗、善于溝通，有良好的自我驅動學習能力，注重效率和團隊意識，能配合團隊按時完成交付； 5、有JS逆向或app逆向能力，能獨立完成常見驗證碼處理的；