欧美在线视频,乱熟女高潮一区二区在线 ,女厕精品toilet,免费看成人啪啪

崗位職責: 職責描述： 1、負責設計爬取、調度和分布式高可用的實現，對海量的目標網站編寫規則進行抓取，處理常見的反爬問題；； 2、負責網頁信息、圖片、視頻等數據的抽取、清洗、消重等工作，提升平臺的抓取效率; 3、編寫維護產品中用到一些自動化腳本(自動化部署、自動化測試等) ; 4、掌握一定的機器學習技術和AI技術，對現有系統進行智能化改造能有思路并提出建設性意見； 5、有良好的代碼習慣，結構清晰，熟悉Git版本管理；維護爬蟲服務器，保證其穩定運行； 6、對已爬取的數據定期進行巡檢工作，保證各渠道源爬取穩定。 任職要求： 1、 具有3年以上Python開發工作經驗，善于溝通，工作積極，態度認真，有主動學習精神； 2、 熟練掌握Python語言，掌握scrapy、selenium、puppeteer等數據抓取方面常用的python庫； 3、 精通爬蟲相關技術(requests/xpath/scrapy/正則表達式/驗證碼加密處理/代理池)； 4、 熟悉HTTP協議，掌握html/css/js/jquery/ajax等相關知識； 5、 熟悉js加密，了解python常見執行js方法，如pyv8； 6、 掌握常用數據庫（如：MySQL，Mongodb）及相應DDL/DML，熟悉索引及常規SQL調優。 7、有海量數據爬取經驗者優先，有大數據量、大并發項目經驗者優先，有互聯網、電商平臺、移動端數據爬取技術經驗者優先； 8 、 優秀的跨部門溝通和團隊協作能力，關注細節，執行能力強，工作態度嚴謹。 相關工作經驗: 3年 必備技能: Python/爬蟲