職位描述

崗位職責(zé):
1.參與SaaS系統(tǒng)數(shù)據(jù)采集模塊的架構(gòu)設(shè)計和開發(fā);
2.規(guī)劃數(shù)據(jù)采集方案、通過API定期采集商業(yè)合作伙伴的數(shù)據(jù);
3.設(shè)計爬蟲策略和防屏蔽規(guī)則,提升網(wǎng)頁抓取的效率和質(zhì)量;
4.參與爬蟲項目的架構(gòu)設(shè)計、研發(fā)、編程工作,改進和提升爬蟲效率;
5.負(fù)責(zé)后臺爬蟲數(shù)據(jù)的分布式存儲設(shè)計以及代碼實現(xiàn);
6.實現(xiàn)數(shù)據(jù)提取、清洗、結(jié)構(gòu)化、入庫、統(tǒng)計分析等需求;
7.研究優(yōu)化算法,提升數(shù)據(jù)采集系統(tǒng)的穩(wěn)定性、可擴展性和效率;
任職要求:
1.3年工作經(jīng)驗以上,熟悉Python編程、設(shè)計模式和組件技術(shù);
2.熟悉Flask/Sqlalchemy/Ffmpeg/Pandas等框架和技術(shù)、熟悉Restful API;
3.熟悉多線程、多進程、協(xié)程開發(fā)、網(wǎng)絡(luò)編程,精通網(wǎng)頁抓取原理及技術(shù)的實現(xiàn)細(xì)節(jié);
4.了解分布式計算和儲存技術(shù)以及相關(guān)原理;
5.熟悉 Django/Django rest/Tornado/Flask/Sqlalchemy 等其中一種或幾種開發(fā)框架;
6.掌握HTML、CSS、JQuery、RESTful 相關(guān)技術(shù);
7.具有良好的站點分析經(jīng)驗,能獨立處理基于(seeion, cookie)、(AccessToken, Token)、(selenium, splash)、(訪問量, 訪問頻率)的反爬。自主設(shè)計爬取流程;
8.熟悉基于規(guī)則的網(wǎng)頁信息定位,精通正則表達式,xpath語法;
9.精通原生Python urllib爬取方式、精通原生Python requests爬取方式、精通框架Python scrapy的爬取方式、熟悉Python aiohttp 異步請求框架的爬取方式;
10.熟悉掌握一種或多種熱門關(guān)系型數(shù)據(jù)庫和非關(guān)系型數(shù)據(jù)庫、熟練使用Git。
福利待遇:
1、上班時間:9:30-12:00;13:00-17:30
2、周末雙休+法定節(jié)假日

公司簡介

									柳州新號角新媒體科技有限公司.成立于2022-01-14.注冊資本為186萬人民幣.法定代表人為李春锃.經(jīng)營狀態(tài)為存續(xù).工商注冊號為45****0001***81.注冊地址為柳州市新柳大道111號新城智埠大樓1903-33號.經(jīng)營范圍包括一般項目:軟件開發(fā);技術(shù)服務(wù).技術(shù)開發(fā).技術(shù)咨詢.技術(shù)交流.技術(shù)轉(zhuǎn)讓.技術(shù)推廣;人工智能基礎(chǔ)軟件開發(fā);人工智能應(yīng)用軟件開發(fā);網(wǎng)絡(luò)與信息安全軟件開發(fā);互聯(lián)網(wǎng)數(shù)據(jù)服務(wù);人工智能理論與算法軟件開發(fā);大數(shù)據(jù)服務(wù);數(shù)字文化創(chuàng)意軟件開發(fā);信息技術(shù)咨詢服務(wù);電機及其控制系統(tǒng)研發(fā);信息系統(tǒng)運行維護服務(wù);數(shù)字內(nèi)容制作服務(wù)(不含出版發(fā)行);信息咨詢服務(wù)(不含許可類信息咨詢服務(wù));科技中介服務(wù);虛擬現(xiàn)實設(shè)備制造;數(shù)字文化創(chuàng)意內(nèi)容應(yīng)用服務(wù);專業(yè)設(shè)計服務(wù);智能基礎(chǔ)制造裝備制造;廣告設(shè)計.代理;軟件銷售;人工智能硬件銷售;可穿戴智能設(shè)備銷售;電子產(chǎn)品銷售.								

上班地點

工作地址: 廣西壯族自治區(qū)柳州市柳東新區(qū)新柳大道111號新城智埠大樓1903-33 查看上班路線

可能感興趣的職位

暫無推薦崗位
柳州新號角新媒體科技有限公司招聘:公司標(biāo)志 logo
柳州新號角新媒體科技有限公司
所在行業(yè) 電子/電機/新媒體
成立時間 2年(2022年1月14日)
企業(yè)性質(zhì) 有限責(zé)任
公司規(guī)模 --
企業(yè)服務(wù)
費用標(biāo)準(zhǔn)
商務(wù)合作
聯(lián)系我們
用戶幫助
用戶協(xié)議
隱私政策
聯(lián)系方式
在線客服:800019119
客服電話:07733679588
客服郵箱:guipin@vip.qq.com / guipin@21cn.com
桂聘APP客戶端
與HR在線聊,入職更快
掃碼下載APP