問 我(wo)是(shi)計算機專業的畢(bi)業生，目前(qian)處于求(qiu)職狀態，想問一下爬蟲(chong)工(gong)程師的工(gong)作(zuo)內(nei)容是(shi)什么(me)？

答 1.編(bian)寫(xie)大(da)(da)規模分(fen)(fen)(fen)布式(shi)網絡爬蟲(chong)(chong)（多線(xian)程、分(fen)(fen)(fen)布式(shi)調(diao)度、協議處理(li)）； 2.能用系統(tong)解決動態網頁內(nei)容抓(zhua)取(qu)、深度網頁內(nei)容抓(zhua)取(qu)的(de)(de)關鍵技術； 3.采用機器學習，信息檢索，大(da)(da)規模數據挖掘等(deng)工(gong)作。 4.爬蟲(chong)(chong)核心(xin)算法和(he)(he)策略優化,熟(shu)悉采集系統(tong)的(de)(de)調(diao)度策略，分(fen)(fen)(fen)析(xi)爬蟲(chong)(chong)系統(tong)瓶(ping)頸設計實(shi)現相應(ying)策略和(he)(he)算法，提升爬蟲(chong)(chong)的(de)(de)抓(zhua)取(qu)效率(lv)和(he)(he)質量。