職位描述：
捕獲互聯(lián)網(wǎng)上的內(nèi)容，從紛繁復(fù)雜的數(shù)據(jù)中，自動過濾出滿足條件的內(nèi)容，根據(jù)設(shè)定條件進行分解并存入數(shù)據(jù)庫，以備后續(xù)分析。能夠及時的跟蹤更新，增量捕獲，避免重復(fù)內(nèi)容，提高爬蟲效率。
技能要求：
? 正規(guī)大學(xué)畢業(yè)，計算機或者數(shù)學(xué)相關(guān)專業(yè)，本科以上學(xué)歷
? 精通Python，相關(guān)崗位三年以上工作經(jīng)驗，HTTP協(xié)議
? 精通HTML，DOM結(jié)構(gòu)，了解XPATH語法和應(yīng)用
? 精通爬蟲開源框架scrapy，熟練使用數(shù)據(jù)分析工具nummy，pandas
? 精通數(shù)據(jù)結(jié)構(gòu)和各種排序算法
? 熟悉Linux操作系統(tǒng)，能夠熟練使用shell腳本
? 熟悉正則表達式，能夠熟練使用正則常用的匹配模式
? 有語義分析經(jīng)驗，有使用jieba進行中文分詞處理經(jīng)驗
? 有數(shù)學(xué)和統(tǒng)計學(xué)背景者優(yōu)先

軟通動力——中國領(lǐng)先的技術(shù)服務(wù)提供商及全球客戶首選合作伙伴
軟通動力是中國領(lǐng)先的技術(shù)服務(wù)提供商，立足中國，服務(wù)全球市場。軟通動力具有端到端“軟件+服務(wù)”綜合服務(wù)能力，服務(wù)范圍包括：咨詢服務(wù)、解決方案及系統(tǒng)集成服務(wù)、IT外包及業(yè)務(wù)流程外包服務(wù)等。在高科技/通信、銀行/企業(yè)金融/保險、電力/能源/水務(wù)/環(huán)保、交通/物流、汽車/制造、零售/電商等10多個重要行業(yè)及業(yè)務(wù)領(lǐng)域，軟通動力具有強大的縱深服務(wù)優(yōu)勢。

過去，軟通動力深刻理解客戶需求，是企業(yè)盈利和成長的最佳合作伙伴；今天，軟通動力充分把握科技大勢，借助云計算、移動互聯(lián)、大數(shù)據(jù)等新興技術(shù)手段，和合作伙伴一起推出創(chuàng)新型解決方案，致力于幫助我們的客戶成為智慧的政府和智慧的企業(yè)；未來，軟通動力將不懈努力，以創(chuàng)新思維和領(lǐng)先技術(shù)，為客戶創(chuàng)造可持續(xù)的價值。

軟通動力于2001年創(chuàng)立，全球總部設(shè)于北京，在全球設(shè)有30多個分支機構(gòu)，28個交付中心。員工總數(shù)超過1萬8千人，服務(wù)數(shù)百家中國及海外客戶。