這篇博客做一個爬蟲的實例今天剛看到一個新聞,在7月26日上映的《哪吒之魔童降世》,密鑰第二次延期至10月26日。截止至9月17日,《哪吒之魔童降世》票房已超49億票房,在豆瓣上對該電影的評價有好有壞。說實話,博主看了這個電影真的覺得蠻不錯的,因此把短評中的差評爬取下來,看下差評包括哪些方面。目錄一、BeautifulSoup二、xpath三、正則表達式一、BeautifulSoup首先需要了解下差評文字內容在哪些標簽下:進入豆瓣該電影短評界面,檢查元素:可
系統 2019-09-27 17:53:05 1763
最近在做游戲服務分層的時候,一直想把mysql的訪問獨立成一個單獨的服務DBGate,原因如下:請求收攏到DBGate,可以使DBGate變為無狀態的,方便橫向擴展當請求量或者存儲量變大時,mysql需要做分庫分表,DBGate可以內部直接處理,外界無感知通過restful限制對數據請求的形式,僅支持簡單的get/post/patch/put進行增刪改查,并不支持復雜查詢。這個也是和游戲業務的特性有關,如果網站等需要復雜查詢的業務,對此并不適合DBGate
系統 2019-09-27 17:52:45 1763
sklearn.preprocessing.RobustScaler:Initsignature:RobustScaler(with_centering=True,with_scaling=True,quantile_range=(25.0,75.0),copy=True,)Docstring:Scalefeaturesusingstatisticsthatarerobusttooutliers.ThisScalerremovesthemedianands
系統 2019-09-27 17:52:43 1763
知識匯總:1-Python語言里一切數據都是對象2-整數:1-python2:int----long(長整數)2-python3:中只有int沒有long3-怎么查看類型---type(100)--有返回值--該類型---3-浮點數--小數:type(3.0)------沒有double4-數字的運算:1-加法+2-減法-3-乘法*4-除法/1-在python39/4==2.25肯定帶小數點等價python2-9//4==22-在python29/4==2
系統 2019-09-27 17:52:42 1763
Python3快速入門(六)——Python3面向對象一、面向對象技術簡介1、面向對象簡介面向對象編程(ObjectOrientedPrograming,OOP)是一種編程思想,OOP把對象當成程序的一個基本單元,一個對象包含數據和操作數據的方法。面向對象編程的三大特性如下:A、封裝,可以隱藏實現細節,使代碼模塊化。B、繼承,可以通過擴展已存在的類來實現代碼重用,避免重復編寫相同的代碼。C、多態,封裝和繼承的目的都是為了實現代碼重用,而多態是為了實現接口重
系統 2019-09-27 17:52:41 1763
psutil(進程和系統實用程序)是一個跨平臺的庫,用于在Python中檢索有關運行進程和系統利用率(CPU,內存,磁盤,網絡,傳感器)的信息。它主要用于系統監視,分析和限制流程資源以及運行流程的管理。它實現了UNIX命令行工具提供的許多功能,例如:ps,top,lsof,netstat,ifconfig,who,df,kill,free,nice,ionice,iostat,iotop,uptime,pidof,tty,taskset,pmap。psut
系統 2019-09-27 17:52:36 1763
填充螺旋演示結果:實例代碼:importmatplotlib.pyplotaspltimportnumpyasnptheta=np.arange(0,8*np.pi,0.1)a=1b=.2fordtinnp.arange(0,2*np.pi,np.pi/2.0):x=a*np.cos(theta+dt)*np.exp(b*theta)y=a*np.sin(theta+dt)*np.exp(b*theta)dt=dt+np.pi/4.0x2=a*np.cos
系統 2019-09-27 17:52:35 1763
前言剛開始開發Web的時候,沒太在意隔離虛擬環境,用了系統的那一套,Python2.7版本是系統自帶的,雖說明年就結束了,但是現在開發都會有一套3.x以上的環境,即使你開發不注意,你部署的時候總歸是要隔離出來的。1.方便隔離,不同環境編寫測試2.方便遷移,pipfreeze到出包文件依賴,隨后提交管理和遷移都很方便virtualenv前提是你有兩套PythonmikejingdeMacBook-Pro:~MKJ$whichpython/usr/bin/py
系統 2019-09-27 17:52:34 1763
1.鎖:Lock(1次放1個)同步鎖線程安全,多線程操作時,內部會讓所有線程排隊處理。如:list/dict/Queue線程不安全+人=>排隊處理。需求:a.創建100個線程,在列表中追加8b.創建100個線程v=[]鎖-把自己的添加到列表中。-在讀取列表的最后一個。解鎖以后鎖一個代碼塊:importthreadingimporttimev=[]lock=threading.Lock()deffunc(arg):lock.acquire()#鎖的區域---
系統 2019-09-27 17:52:33 1763
前序Thereshouldbeone-andpreferablyonlyone-obviouswaytodoit.――――theZenofPython意譯:Python提倡用一種,而且最好是只有一種方法來完成一件事雖然Python有以上的提倡,但卻在字符串格式化方面,沒有做到這一點。字符串格式化敲黑板,劃重點:在Python中有至少三種常見方式實現字符串格式化:%-formatting格式(Python2.6以前,推薦輸出時使用)str.format()格
系統 2019-09-27 17:52:21 1763