崗位職責(zé)：

1、負(fù)責(zé)圖像、視頻、文本、網(wǎng)頁等開源數(shù)據(jù)的采集、存儲(chǔ)；

2、參與網(wǎng)頁、客戶端等來源的爬蟲架構(gòu)的設(shè)計(jì)與實(shí)現(xiàn)；

3、負(fù)責(zé)開源數(shù)據(jù)的清洗和挖掘；

4、撰寫相關(guān)文檔和技術(shù)報(bào)告。

任職要求：

1、計(jì)算機(jī)、網(wǎng)絡(luò)、人工智能等相關(guān)專業(yè)本科以上學(xué)歷，兩年以上工作經(jīng)驗(yàn)；

2、熟悉基于正則表達(dá)式和基本的網(wǎng)頁信息抽取技術(shù)；

3、熟練使用python，熟悉基于Cookie的網(wǎng)站登錄原理；

4、熟悉基本網(wǎng)絡(luò)協(xié)議；

5、.熟悉常見的爬蟲模塊及工具，熟練掌握selenium、代理維護(hù)、模擬登陸等爬蟲技術(shù)；

6、有數(shù)據(jù)采集相關(guān)項(xiàng)目的優(yōu)先。
聯(lián)系我時(shí)，請(qǐng)說是在臨沂招聘網(wǎng)上看到的，謝謝！