最近博主手上有一個爬蟲項目，開始深入研究python爬蟲開發，這是我篇博客也相當于是我的學習筆記，我認為學習爬蟲第一步，先學習python多線程與多進程，熟悉網絡編程，接下來會陸續以博客的方式跟大家做分享。多進程Python實現多進程的方式主要有兩種，一種方法是使用os模塊中的fork方法，另一種方法是使用multiprocessing模塊。這兩種方法的區別在于前者僅適用于Unix/Linux操作系統，對Windows不支持，后者則是跨平臺的實現方式，目前
系統 2019-09-27 17:53:30 1752
本來是在找交通識別的程序，然后湊巧看見了證件照換底，于是學習了一下~一開始在網上找了一個很普遍寫的程序，但是效果并不好，想要放棄了，然后看見了這個，參考：pythonopencv實現證件照換底功能本人基于此做了一些改進，便于自己運行和調試，還加了中值濾波，本人覺得效果還不錯~代碼：importcv2importnumpyasnpdefcvtBackground(path,color):"""功能：給證件照更換背景色（常用背景色紅、白、藍）輸入參數：path
系統 2019-09-27 17:53:20 1752
Python面向對象編程——異常處理一、什么是異常異常就是程序運行時發生錯誤的信號（在程序出現錯誤時，則會產生一個異常，若程序沒有處理它，則會拋出該異常，程序的運行也隨之終止），在python中,錯誤觸發的異常如下：而錯誤分成兩種1、語法錯誤（這種錯誤，根本過不了python解釋器的語法檢測，必須在程序執行前就改正）#語法錯誤示范一if#語法錯誤示范二deftest:pass#語法錯誤示范三classFoopass#語法錯誤示范四print(haha)2、
系統 2019-09-27 17:53:13 1752
早聽說用python做網絡爬蟲非常方便，正好這幾天單位也有這樣的需求，需要登陸XX網站下載部分文檔，于是自己親身試驗了一番，效果還不錯。本例所登錄的某網站需要提供用戶名，密碼和驗證碼，在此使用了python的urllib2直接登錄網站并處理網站的Cookie。Cookie的工作原理：Cookie由服務端生成，然后發送給瀏覽器，瀏覽器會將Cookie保存在某個目錄下的文本文件中。在下次請求同一網站時，會發送該Cookie給服務器，這樣服務器就知道該用戶是否合
系統 2019-09-27 17:53:11 1752
首先,你得下載SocksiPy這個.解壓出來之后里面會有一個socks.py文件.然后你可以把這個文件復制到python安裝目錄里面的Lib\site-packages中.或者把這個文件復制到程序所在的目錄中.然后就可以再程序中使用socket代理來編寫程序了.下面是示例代碼importsocksimportsocketsocks.setdefaultproxy(socks.PROXY_TYPE_SOCKS5,"127.0.0.1",8088)socket
系統 2019-09-27 17:53:08 1752
#使用StandardScaler進行數據預處理importnumpyimportmatplotlib.pyplotaspltfromsklearn.datasetsimportmake_blobsX,y=make_blobs(n_samples=40,centers=2,random_state=50,cluster_std=2)plt.scatter(X[:,0],X[:,1],c=y,cmap=plt.cm.cool)plt.show()#導入Sta
系統 2019-09-27 17:52:41 1752
Python命令行之旅：使用argparse實現git命令作者：HelloGitHub-ProdesireHelloGitHub的《講解開源項目》系列，項目地址：https://github.com/HelloGitHub-Team/Article前言在前面三篇介紹argparse的文章中，我們全面了解了argparse的能力，相信不少小伙伴們都已經摩拳擦掌，想要打造一個屬于自己的命令行工具。本文將以我們日常工作中最常見的git命令為例，講解如何使用arg
系統 2019-09-27 17:52:36 1752
mkvirtualenv-ppython3環境名創建虛擬環境rmvirtualenv環境名刪除環境進入虛擬環境workon環境名(workon+tab可以出來所有環境)查看環境下所有包pip3list查看環境下安裝的包(不包括原生python包)pip3freeze依賴包文件生成pip3freeze>requirements.txt環境導入依賴包pip3install-rrequirements.txt普通安裝pip3install包名這是linux下的指
系統 2019-09-27 17:52:34 1752
Python語言與Perl，C和Java等語言有許多相似之處，也有一定的差異性，以下是Python語言獲取文件后綴名和文件名的方法：#Python獲取文件后綴名的方法importos.pathdeffile_extension(path):returnos.path.splitext(path)[1]printfile_extension('/py/a.py')輸出：.py#Python獲取目錄和文件名importos.pathdeffile_extens
系統 2019-09-27 17:52:22 1752
yield的功能類似于return，但是不同之處在于它返回的是生成器。生成器生成器是通過一個或多個yield表達式構成的函數，每一個生成器都是一個迭代器（但是迭代器不一定是生成器）。如果一個函數包含yield關鍵字，這個函數就會變為一個生成器。生成器并不會一次返回所有結果，而是每次遇到yield關鍵字后返回相應結果，并保留函數當前的運行狀態，等待下一次的調用。由于生成器也是一個迭代器，那么它就應該支持next方法來獲取下一個值。基本操作#通過`yield`
系統 2019-09-27 17:52:18 1752
