職位描述
年底會搬至望京,請關注??!職位描述1、設計和開發分布式網絡爬蟲系統,進行多平臺信息的抓取工作2、PC網站和APP數據爬蟲架構設計、反爬蟲策略研究3、負責對新產品或新技術進行技術研究,包含不限于AI采集框架、自動化采集等職位要求1、計算機相關專業本科及以上學歷,3年以上相關工作經驗2、熟悉爬蟲原理,熟悉常見的反爬蟲技術、逆向技術3、精通Python具有扎實的計算機基礎和編程能力,熟悉常見的算法與數據結構,具有優秀的邏輯思維能力4、精通逆向,脫殼、反編譯、抓包、攔截、破解等5、有爬蟲agent、browser-use、RPA+OCR、分布式爬蟲架構、反反爬蟲、實時爬蟲等項目經驗者優先6、采集范圍短視頻站點采集為主加分項:有過爬蟲agent、browser-use、RPA+OCR,能使用LangChain開發框架,熟悉提示詞、意圖識別、思維鏈、思維樹的應用。
企業介紹
新奧集團起步于1989年,以“創建現代能源體系、提高人民生活品質,成為受人尊敬的創新型智慧企業”為使命愿景,形成了貫通下游分銷、中游貿易儲運、上游生產的清潔能源產業鏈和涵蓋健康、文化、旅游、置業的生命健康產品鏈。面向數字時代,新奧積極推動數字化轉型,著力打造泛能網、來康網兩大平臺,構建清潔能源生態圈、生命健康生態圈。目前,新奧集團服務范圍覆蓋中國27個?。ㄊ?、自治區)的200多個城市,業務拓展至東南亞、南亞和非洲等地,雇員超過4.5萬人,旗下有新奧能源、新奧股份、新智認知、西藏旅游4家上市公司,2019年經營收入達1645億元人民幣。