崗位描述：
1. 負(fù)責(zé)分布式網(wǎng)絡(luò)爬蟲(chóng)系統(tǒng)的架構(gòu)設(shè)計(jì)與開(kāi)發(fā)；
2. 負(fù)責(zé)爬蟲(chóng)核心算法的策略?xún)?yōu)化研發(fā)，優(yōu)化搜索、匹配、任務(wù)調(diào)度、抓取，充分利用資源，提升程序性能及效率；
3. 研發(fā)防屏蔽規(guī)則，避免限制，提升抓取的效率和質(zhì)量；
4. 能獨(dú)立解決實(shí)際開(kāi)發(fā)過(guò)程碰到的各類(lèi)問(wèn)題，進(jìn)行技術(shù)分享與培訓(xùn)；

任職要求：
1. 3年以上垂直搜索爬蟲(chóng)，分布式網(wǎng)絡(luò)爬蟲(chóng)開(kāi)發(fā)經(jīng)驗(yàn)，至少獨(dú)立負(fù)責(zé)過(guò)1個(gè)完整爬蟲(chóng)項(xiàng)目；
2. 至少精通一門(mén)編程語(yǔ)言（Python或Java等）；
3. 熟悉爬蟲(chóng)相關(guān)技術(shù)，正則表達(dá)式/css path/xpath/驗(yàn)證碼加密處理/身份限制/代理池等，能夠從結(jié)構(gòu)化的和非結(jié)構(gòu)化的數(shù)據(jù)中獲取信息；
4. 精通一種開(kāi)源爬蟲(chóng)框架，如scrapy、webmagic、nutch、heritrix等，有開(kāi)發(fā)爬蟲(chóng)框架經(jīng)驗(yàn)優(yōu)先；熟悉反爬蟲(chóng)、驗(yàn)證碼識(shí)別技術(shù)者優(yōu)先；
5. 抓取策略熟悉(深度優(yōu)先遍歷策略／寬度優(yōu)先遍歷策略／反向鏈接數(shù)策略／Partial PageRank策略／OPIC策略策略／大站優(yōu)先策略等)；
6. 善于總結(jié)，積極主動(dòng)學(xué)習(xí)新技術(shù)，熱愛(ài)爬蟲(chóng)工作，直面困難敢于承擔(dān)責(zé)任，有較強(qiáng)的溝通的能力和理解能力，有較強(qiáng)的抗壓能力。

PatSnap is a disruptive market leading provider of intellectual property
analytics, for analysing technology trends, accelerating innovation, market
planning, competitor intelligence and maximising returns on existing and new
IP assets. It is used by over 3000 organisations globally including Nasa, GE,
Lego, Vodafone, Ferrari, Siemens, Xiaomi and China Mobile. The company is
backed by world class venture capital firms such as Sequoia, Summit
Partners, Shunwei and Vertex Ventures. With an impressive revenue growth
rate of 1078% from 2014 to 2016, PatSnap was ranked 44 on “Deloitte
Technology Fast 500”.
智慧芽是一家全球領(lǐng)先的知識(shí)產(chǎn)權(quán)信息服務(wù)(SaaS)提供商，基于專(zhuān)利大數(shù)據(jù)，
幫助分客戶(hù)析和了解最新技術(shù)發(fā)展趨勢(shì)并加速創(chuàng)新、獲取競(jìng)爭(zhēng)對(duì)手情報(bào)、科學(xué)
進(jìn)行市場(chǎng)布局以及實(shí)現(xiàn)知識(shí)產(chǎn)權(quán)價(jià)值最大化，提高企業(yè)核心競(jìng)爭(zhēng)力。目前全球
已有超過(guò)3000 多機(jī)構(gòu)和企業(yè)成為智慧芽的客戶(hù)，如美國(guó)宇航局、通用、樂(lè)高、
沃達(dá)豐、法拉利、西門(mén)子、小米、中國(guó)移動(dòng)等。智慧芽得到了包括紅杉、頂峰
投資、順為、淡馬錫祥峰基金等世界頂級(jí)風(fēng)險(xiǎn)投資機(jī)構(gòu)的青睞和投資。2014～
2016 年，智慧芽的營(yíng)業(yè)收入以超過(guò)1078%的增長(zhǎng)率快速發(fā)展，被評(píng)為德勤亞太
區(qū)高科技高成長(zhǎng)500 強(qiáng)企業(yè)，并獲得第44 位的優(yōu)質(zhì)排名。