上面的博客把基本的HTML解析庫已經(jīng)說完了,這次我們來給予幾個實戰(zhàn)的項目。這次主要用Requests庫+正則表達式來解析HTML。項目一:爬取貓眼電影TOP100信息代碼地址:https://gitee.com/dwyui/maoyan-Requests.git項目二:美食爬取(包含多層爬取)代碼地址:https://gitee.com/dwyui/meishi_Requests.git
系統(tǒng) 2019-09-27 17:47:06 1753
字節(jié)串bytes字節(jié)串也叫字節(jié)序列,是不可變的序列,存儲以字節(jié)為單位的數(shù)據(jù)字節(jié)串表示方法:b"ABCD"b"\x41\x42"...字節(jié)串的構(gòu)造函數(shù):bytes()創(chuàng)建一個空的字節(jié)串,同b””bytes(整數(shù)可迭代對象)用可迭代對象創(chuàng)建一個字節(jié)串bytes(整數(shù)n)生成n個值為0的字節(jié)串bytes(字符串,encoding='utf-8')轉(zhuǎn)碼字節(jié)串的運算:同其他序列的運算+、+=、*、*=<、<=、>、>=、!=、==in/notin切片和索引函數(shù):le
系統(tǒng) 2019-09-27 17:47:04 1753
本文實例講述了python針對mysql數(shù)據(jù)庫的連接、查詢、更新、刪除操作。分享給大家供大家參考,具體如下:連接一代碼importpymysql#打開數(shù)據(jù)庫連接db=pymysql.connect("localhost","root","root","db_test01")#使用cursor()方法創(chuàng)建一個游標對象cursorcursor=db.cursor()#使用execute()方法執(zhí)行SQL查詢cursor.execute("SELECTVERSI
系統(tǒng) 2019-09-27 17:46:56 1753
Python進行Redis數(shù)據(jù)遷移由于開發(fā)時的誤操作,導致redis數(shù)據(jù)損壞,所以需要進行redis的數(shù)據(jù)遷移,網(wǎng)上大佬的教程基本都是需要下載附加工具,亦或是需要一些復雜的操作,個人覺得麻煩還不如寫個腳本來的經(jīng)濟實惠。#-*-coding:utf-8-*-fromredisimportStrictRedis"""redis是用于操作Redis的第三方庫,StrictRedis是官方推薦的方法,而且Redis是它的子類,Redis能做到的StrictRedi
系統(tǒng) 2019-09-27 17:46:53 1753
Python腳本有一個毛病,當使用相對路徑時,被另一個不同目錄下的py文件中導入時,會報找不到對應文件的問題。感覺是當前工作目錄變成了導入py文件當前目錄。如果你有配置文件的讀取操作,然后都放在一個py文件中,而你又用的是相對路徑,而且這個py文件在多個不同目錄下的py文件中被導入,那就呵呵了。。。還是用絕對路徑吧。解決這個問題,可以用絕對路徑。當然是自動的絕對路徑,而不是每次都手動給前綴賦值,讓腳本自動尋找當前文件的絕對路徑。此處分享在python下獲取
系統(tǒng) 2019-09-27 17:46:48 1753
python發(fā)郵件需要掌握兩個模塊的用法,smtplib和email,這倆模塊是python自帶的,只需import即可使用。smtplib模塊主要負責發(fā)送郵件,email模塊主要負責構(gòu)造郵件。smtplib模塊主要負責發(fā)送郵件:是一個發(fā)送郵件的動作,連接郵箱服務器,登錄郵箱,發(fā)送郵件(有發(fā)件人,收信人,郵件內(nèi)容)。email模塊主要負責構(gòu)造郵件:指的是郵箱頁面顯示的一些構(gòu)造,如發(fā)件人,收件人,主題,正文,附件等。1.smtplib模塊smtplib使用較
系統(tǒng) 2019-09-27 17:46:47 1753
sys模塊提供了許多函數(shù)和變量來處理Python運行時環(huán)境的不同部分.處理命令行參數(shù)在解釋器啟動后,argv列表包含了傳遞給腳本的所有參數(shù),列表的第一個元素為腳本自身的名稱.使用sys模塊獲得腳本的參數(shù)復制代碼代碼如下:print"scriptnameis",sys.argv[0]#使用sys.argv[0]采集腳本名稱iflen(sys.argv)>1:print"thereare",len(sys.argv)-1,"arguments:"#使用len(
系統(tǒng) 2019-09-27 17:46:35 1753
PythonSocket模塊中包含一些有用IP轉(zhuǎn)換函數(shù),說明如下:socket.ntohl(x)//類似于C語言的ntohl(x)把32位正整數(shù)從網(wǎng)絡序轉(zhuǎn)換成主機字節(jié)序。socket.ntohs(x)//類似于C語言的ntohs(x)把16位正整數(shù)從網(wǎng)絡序轉(zhuǎn)換成主機字節(jié)序。socket.htonl(x)//類似于C語言的htonl(x)把32位正整數(shù)從主機字節(jié)序轉(zhuǎn)換成網(wǎng)絡序。socket.htons(x)//類似于C語言的htons(x)把16位正整數(shù)從主
系統(tǒng) 2019-09-27 17:46:35 1753
花了些工夫?qū)⑺槠W(wǎng)部署到了SAE,中途遇到各類問題。感覺SAE看上去很美,實際上卻并不是太成熟(至少python版如此)。下面記錄下我遇到的一些主要問題以及解決方法。django版本問題Django1.4都即將發(fā)布了,SAE平臺自帶的SAE版本依舊為1.2x。為使用django1.3版本,你需上傳自己的django。具體做法可參考SAE手冊中的runtime.html#virtualenv日志模塊出錯最先遇到的是日至模塊的問題。錯誤顯示AdminEmail
系統(tǒng) 2019-09-27 17:46:12 1753
本文以實例形式講述了python3編寫C/S網(wǎng)絡程序的實現(xiàn)方法。具體方法如下:本文所述實例是根據(jù)wingIDE的提示編寫的一個C/S小程序,具體代碼如下:client端myclient.py代碼如下:#!/bin/envpython#-*-coding:gb18030-*-#importsocketimporttimei=1whilei<10:address=("127.0.0.1",3138)s=socket.socket(socket.AF_INET,
系統(tǒng) 2019-09-27 17:46:04 1753