職位描述
requestsScrapy日志分析PUBMEDELSEVIER反爬蟲(chóng)爬蟲(chóng)框架分布式爬蟲(chóng)SELENIUM
職位要求：
1. 精通Python爬蟲(chóng)框架（Scrapy/Selenium/Requests等），熟悉分布式爬蟲(chóng)架構(gòu)；
2. 掌握反爬破解技術(shù)（IP代理池、請(qǐng)求頭模擬、JS逆向等）；
3. 具備文獻(xiàn)平臺(tái)爬取經(jīng)驗(yàn)（如Elsevier、知網(wǎng)、PubMed等為佳）；
4. 能通過(guò)日志分析快速定位爬蟲(chóng)中斷原因，制定修復(fù)方案。
工作職責(zé)
1.開(kāi)發(fā)自動(dòng)化爬蟲(chóng)程序，從指定學(xué)術(shù)網(wǎng)站/數(shù)據(jù)庫(kù)每日抓取篇文獻(xiàn)（PDF）;
2.設(shè)計(jì)防封禁策略，繞過(guò)反爬機(jī)制（如驗(yàn)證碼、IP限制、動(dòng)態(tài)加載等）;
3.按項(xiàng)目規(guī)范清洗、結(jié)構(gòu)化數(shù)據(jù);
4.監(jiān)控爬蟲(chóng)運(yùn)行，及時(shí)修復(fù)因網(wǎng)站改版、規(guī)則變動(dòng)導(dǎo)致的故障；
5.定期提交爬取日志與數(shù)據(jù)質(zhì)量報(bào)告。
試崗要求（合作前提）
提交可運(yùn)行的爬蟲(chóng)Demo，證明能穩(wěn)定實(shí)現(xiàn)單日2000篇文獻(xiàn)的爬取能力；
目標(biāo)網(wǎng)站及字段要求將在簽約NDA后提供。
工作地點(diǎn)
浦東新區(qū)上海高乘產(chǎn)業(yè)園1幢3層
相似職位
- 爬蟲(chóng)工程師（python）1-2萬(wàn)
上海 - 徐匯
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司 - 爬蟲(chóng)工程師（項(xiàng)目合作）1.5-3萬(wàn)
上海 - 浦東
美國(guó)Selleck生物科技有限公司 - 爬蟲(chóng)工程師（雙休+五險(xiǎn)一金）1.5-2.5萬(wàn)
上海 - 浦東
首聘(北京)科技有限公司 - 開(kāi)發(fā)工程師（爬蟲(chóng)方向）7000-14000元
上海 - 楊浦
上海畢得醫(yī)藥科技股份有限公司 - 爬蟲(chóng)工程師1-1.5萬(wàn)
上海 - 浦東
上海問(wèn)道云人工智能科技有限公司 - python爬蟲(chóng)工程師（線上一輪面試）8000-9000元
上海 - 徐匯
上海申美信息科技有限公司北京分公司
熱門(mén)公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車(chē)招聘
- 蔚來(lái)招聘
- 東風(fēng)汽車(chē)招聘
- 長(zhǎng)城汽車(chē)招聘
- 奇瑞汽車(chē)招聘
- 理想汽車(chē)招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車(chē)招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
陸女士/招聘專員
當(dāng)前在線立即溝通
美國(guó)Selleck生物科技有限公司Selleck總公司Selleck Chemicals LLC 2006年成立于美國(guó)德克薩斯州休斯敦，作為集研發(fā)、生產(chǎn)、銷(xiāo)售于一體的全球領(lǐng)先的抑制劑公司，Selleck一直專注于生命科學(xué)領(lǐng)域高端試劑的開(kāi)發(fā)與研究，為客戶提供用于藥物研發(fā)的高品質(zhì)生命科學(xué)試劑，產(chǎn)品包括小分子激酶抑制劑，天然產(chǎn)物，及專業(yè)的高通量篩選抑制劑分子庫(kù)等。目前Selleck在中國(guó)、歐洲、日本均設(shè)有分部，通過(guò)在中國(guó)、歐洲和美國(guó)的倉(cāng)庫(kù)輻射全球整個(gè)市場(chǎng)。憑借在生命科學(xué)領(lǐng)域的多年研究經(jīng)驗(yàn)，Selleck與全球十萬(wàn)多個(gè)客戶建立了長(zhǎng)期穩(wěn)定的合作關(guān)系，其中包括世界各大制藥公司，生物科技公司，醫(yī)院，世界著名高校和研究所等，是全球第二大抑制劑供應(yīng)商。2010年1月至今，使用Selleck產(chǎn)品發(fā)表的SCI文獻(xiàn)數(shù)已超過(guò)10萬(wàn)篇；在頂級(jí)學(xué)術(shù)期刊Nature、Science和Cell上面發(fā)表的文獻(xiàn)已達(dá)603篇！且已有十六位諾貝爾獎(jiǎng)得主使用Selleck產(chǎn)品發(fā)表文獻(xiàn)52篇！Selleck匯集了一大批有活力、有干勁、多領(lǐng)域的年輕人才。我們期待擁有夢(mèng)想的你加盟，一起努力，共創(chuàng)未來(lái)！Selleck Chemicals LLC is one of the world's leading suppliers of biochemical products and services. Selleck Chemicals LLC provides comprehensive and ongoing Inhibitors and modulators for multiple cell signaling pathways including MAPK, PI3K/Akt/mTOR, Apoptosis, Angiogenesis, and JAK/STAT, among others. Currently, we have over 7000 inhibitor products available and this list continues to expand. In addition, we also provide a variety of screening libraries for High Throughput Screening and High Content Screening to advance drug discovery and systems biology research. All the inhibitors are well classified, so you can directly choose inhibitors according to signaling pathways or research areas listed in our company website.公司網(wǎng)站： http://www.selleck.cn http://www.selleckchem.com
公司主頁(yè)