學(xué)習(xí)python爬蟲技術(shù)可以做哪些工作?？可以處理電商網(wǎng)站的商品數(shù)據(jù)、微博/ BBS的輿情數(shù)據(jù)、新聞文本、學(xué)術(shù)信息、投票、管理多個平臺的多個賬戶、微信聊天機器人、機器學(xué)習(xí)語料庫、垂直領(lǐng)域的服務(wù)、預(yù)測和判斷等，下面還有更詳細的介紹，一起來了解一下吧。

1. 微博/ BBS的輿情數(shù)據(jù)

也是針對這個產(chǎn)業(yè)做的，從微薄、論壇上抓取相關(guān)信息，挖掘該產(chǎn)業(yè)內(nèi)一些有趣的輿情信息。其實爬蟲已經(jīng)用于輿情監(jiān)控已經(jīng)比較成熟了，很多大公司都有相關(guān)的監(jiān)控部門。

2. 電商網(wǎng)站的商品數(shù)據(jù)

曾經(jīng)幫一個咨詢團隊爬某個產(chǎn)業(yè)的商品信息，包括品牌、價格、銷量、規(guī)格型號等。然后分析這個產(chǎn)業(yè)中的暢銷品牌、暢銷品類、價格走勢、行業(yè)前景等。

3. 新聞文本

新聞文本，其實也算是一種輿情，只不過相對于微博上的文本，這個更加正式一些。爬取百度新聞上關(guān)于某關(guān)鍵字的信息，每周梳理出幾個關(guān)鍵詞，可以抓住行業(yè)動向。

4. 學(xué)術(shù)信息

爬取一些學(xué)術(shù)網(wǎng)站上的信息用來做研究。比如這個genecard這個網(wǎng)站叫基因卡，你輸入一個關(guān)鍵字，比如height(身高)，會出現(xiàn)很多跟身高有關(guān)的基因。

點進去，會有每個基因的作用、位置、表達等信息。如果你是一位研究身高的科研人員，一個一個點開記錄下來就太耗時了，寫一個爬蟲，可以把這些數(shù)據(jù)按照規(guī)范格式全部爬下來，之后無論是閱讀，還是做進一步分析都會方便很多。

除了以上幾個領(lǐng)域，還會應(yīng)用于投票、管理多個平臺的多個賬戶(如各個電商平臺的賬號)、微信聊天機器人、機器學(xué)習(xí)語料庫、垂直領(lǐng)域的服務(wù)(二手車估值)、預(yù)測和判斷(醫(yī)療領(lǐng)域)等方向。