【摘要】在前一章中，我們已經(jīng)成功嘗試分析Ajax來(lái)抓取相關(guān)數(shù)據(jù)，但是并不是所有頁(yè)面都可以通過(guò)分析Ajax來(lái)完成抓取。比如，淘寶，它的整個(gè)頁(yè)面數(shù)據(jù)確實(shí)也是通過(guò)Ajax獲取的，但是這些Ajax接口參數(shù)比較復(fù)雜，可能會(huì)包含加密密鑰等，所以如果想自己構(gòu)造Ajax參數(shù)，還是比較困難的。對(duì)于這種頁(yè)面，最方便快捷的抓取方法就是通過(guò)Selenium。本節(jié)中，我們就用Selenium來(lái)模擬瀏覽器操作，抓取淘寶的商品信息，并將結(jié)果保存到MongoDB。1.本節(jié)目標(biāo)本節(jié)中，我們
系統(tǒng) 2019-09-27 17:54:29 1761
1.工具包安裝pipinstallvirtualenv|sudoapt-getinstallpython-virtualenv2.創(chuàng)建虛擬環(huán)境#virtualenv/system_python_bin_path/your_virenv_local_pathvirtualenv-p/usr/bin/python2.7/usr_local_path#創(chuàng)建鏈接sudoln-sf/usr_local_path/bin/activatetf_activatesudo
系統(tǒng) 2019-09-27 17:54:23 1761
【百度云搜索，搜各種資料:http://www.lqkweb.com】【搜網(wǎng)盤(pán)，搜各種資料:http://www.swpan.cn】Requests請(qǐng)求Requests請(qǐng)求就是我們?cè)谂老x(chóng)文件寫(xiě)的Requests()方法，也就是提交一個(gè)請(qǐng)求地址，Requests請(qǐng)求是我們自定義的**Requests()方法提交一個(gè)請(qǐng)求參數(shù)：url=字符串類型url地址callback=回調(diào)函數(shù)名稱method=字符串類型請(qǐng)求方式，如果GET,POSTheaders=字典類型
系統(tǒng) 2019-09-27 17:54:11 1761
話不多說(shuō),代碼說(shuō)話:importnumpyasnpimportmathclassConv2D(object):def__init__(self,shape,output_channels,ksize=3,stride=1,method='VALID'):self.input_shape=shapeself.output_channels=output_channelsself.input_channels=shape[-1]self.batchsize=s
系統(tǒng) 2019-09-27 17:54:06 1761
Python面向?qū)ο缶幊獭惻c對(duì)象一、類與對(duì)象的概念類即類別、種類，是面向?qū)ο笤O(shè)計(jì)最重要的概念，從一小節(jié)我們得知對(duì)象是特征與技能的結(jié)合體，而類則是一系列對(duì)象相似的特征與技能的結(jié)合體。那么問(wèn)題來(lái)了，先有的一個(gè)個(gè)具體存在的對(duì)象（比如一個(gè)具體存在的人），還是先有的人類這個(gè)概念，這個(gè)問(wèn)題需要分兩種情況去看。在現(xiàn)實(shí)世界中：肯定是先有對(duì)象，再有類。世界上肯定是先出現(xiàn)各種各樣的實(shí)際存在的物體，然后隨著人類文明的發(fā)展，人類站在不同的角度總結(jié)出了不同的種類，比如人類、動(dòng)物
系統(tǒng) 2019-09-27 17:53:58 1761
創(chuàng)建列表復(fù)制代碼代碼如下:sample_list=['a',1,('a','b')]Python列表操作復(fù)制代碼代碼如下:sample_list=['a','b',0,1,3]得到列表中的某一個(gè)值復(fù)制代碼代碼如下:value_start=sample_list[0]end_value=sample_list[-1]刪除列表的第一個(gè)值復(fù)制代碼代碼如下:delsample_list[0]在列表中插入一個(gè)值復(fù)制代碼代碼如下:sample_list[0:0]=['
系統(tǒng) 2019-09-27 17:53:48 1761
隨著智能時(shí)代的來(lái)臨，常常聽(tīng)到人說(shuō)，想玩轉(zhuǎn)人工智能，就必須學(xué)好Python。可是鮮少有人去深處挖掘原因，人工智能與Python語(yǔ)言的關(guān)系。為什么不能用其他語(yǔ)言，如PHP、C++之類？那今天六星教育就來(lái)講講這里面的門(mén)道！首先，我們得清楚什么是Python？它能干嘛？Python是一種計(jì)算機(jī)程序設(shè)計(jì)語(yǔ)言，它有著豐富和強(qiáng)大的庫(kù)，常被稱為“強(qiáng)力膠語(yǔ)言”，可以把用其它語(yǔ)言編寫(xiě)的各類模塊很方便快捷地聯(lián)接在一起。Python能應(yīng)用于很多方面，但是最重要的一點(diǎn)就是它是人工智
系統(tǒng) 2019-09-27 17:53:42 1761
實(shí)測(cè)系統(tǒng)：ubuntu16.4debain9.01.Ubuntu16.04系統(tǒng)自帶Python2.7和Python3.5，而默認(rèn)采用的是2.7版本，可采用如下命令查看單當(dāng)前版本號(hào):python-V2.Python2.7和3.5都是默認(rèn)安裝在/usr/local/lib/python2.7(3.5)目錄下，link文件在/usr/bin文件夾下，需要?jiǎng)h除默認(rèn)pythonlink文件pythonsudorm/usr/bin/python重新建立鏈接，并指向Py
系統(tǒng) 2019-09-27 17:53:40 1761
python一直對(duì)中文支持的不好，最近老遇到編碼問(wèn)題，而且?guī)缀鯖](méi)有通用的方案來(lái)解決這個(gè)問(wèn)題，但是對(duì)常見(jiàn)的方法都試過(guò)之后，發(fā)現(xiàn)還是可以解決的，下面總結(jié)了常用的支持中文的編碼問(wèn)題（這些方法中可能其中一個(gè)就能解決問(wèn)題，也可能是多個(gè)組合）。（1）、首先，要保證文件的開(kāi)頭要加上編碼設(shè)置來(lái)說(shuō)明文件的編碼復(fù)制代碼代碼如下:#encoding=utf-8（2）、然后，在連接數(shù)據(jù)的連接參數(shù)里加上字符集說(shuō)明查詢出的結(jié)果的編碼，這個(gè)不加的后果可能是查詢出的漢字字符都是問(wèn)號(hào)復(fù)制代
系統(tǒng) 2019-09-27 17:53:20 1761
環(huán)境：win10(64)，python3.7.1，git2.7.2，pylint-2.3.1，git_pylint_commit_hook-2.5.1以上為當(dāng)期搭建所用到的版本，有異常時(shí)方便查找問(wèn)題。安裝pylint，pylint是一個(gè)單獨(dú)可以對(duì)python文件進(jìn)行格式校驗(yàn)的模塊，https://www.pylint.org/官網(wǎng)地址有各個(gè)電腦環(huán)境的安裝說(shuō)明，Windows下，使用：pipinstallpylint安裝完成之后，就可以直接使用pylint對(duì)
系統(tǒng) 2019-09-27 17:53:18 1761
