Python作為一門腳本語言,它靈活、易用、易學、適用場景多,實現程序快捷便利,早已經成為程序員們的一門編程利器。從小到服務器運維的腳本,到大型軟件開發(fā),使用python都能夠很靈活的快速實現。python不但可以快速實現大型的web應用程序,在網絡層的開發(fā),以及工程計算、數學計算上都有方便的開發(fā)手段。Map&Reduce思想在python里面也有著非常方便的實現。甚至在一些嵌入式設備上,你也可以實現自己的python應用。諸如著名的云計算框架openstack之類很多編程應用,都能見到python的身影。
網絡爬蟲(Web Spider),是通過網頁的鏈接地址來尋找網頁的。從網站某一個頁面(通常是首頁)開始,讀取網頁的內容,找到在網頁中的其它鏈接地址,然后通過這些鏈接地址尋找下一個網頁,這樣一直循環(huán)下去,直到把這個網站所有的網頁都抓取完為止。