版權(quán)說(shuō)明：本文檔由用戶提供并上傳，收益歸屬內(nèi)容提供方，若內(nèi)容存在侵權(quán)，請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
單元開(kāi)篇
CCBY-NC-SA4.0嵩天
從Web解析到網(wǎng)絡(luò)空間
Python庫(kù)之網(wǎng)絡(luò)爬蟲(chóng)
Python庫(kù)之Web信息提取
Python庫(kù)之Web 開(kāi)發(fā)
Python庫(kù)之網(wǎng)絡(luò)應(yīng)用開(kāi)發(fā)
Python庫(kù)之網(wǎng)絡(luò)爬蟲(chóng)
CCBY-NC-SA4.0嵩天
Python庫(kù)之網(wǎng)絡(luò)爬蟲(chóng)
Requests:最友好的網(wǎng)絡(luò)爬蟲(chóng)功能庫(kù)
提供了簡(jiǎn)單易用的類HTTP協(xié)議網(wǎng)絡(luò)爬蟲(chóng)功能
支持連接池、SSL、 s、HTTP(S) 等
Python最主要的頁(yè)面級(jí)網(wǎng)絡(luò)爬蟲(chóng)功能庫(kù)
r.text
Python庫(kù)之網(wǎng)絡(luò)爬蟲(chóng)
Requests:最友好的網(wǎng)絡(luò)爬蟲(chóng)功能庫(kù)importrequests
r=requests.get('',\auth=('user','pass'))
r.status_coder.headers['content-type']r.encoding
Python庫(kù)之網(wǎng)絡(luò)爬蟲(chóng)
Scrapy:優(yōu)秀的網(wǎng)絡(luò)爬蟲(chóng)框架
提供了構(gòu)建網(wǎng)絡(luò)爬蟲(chóng)系統(tǒng)的框架功能，功能半成品
支持批量和定時(shí)網(wǎng)頁(yè)爬取、提供數(shù)據(jù)處理流程等
Python最主要且最專業(yè)的網(wǎng)絡(luò)爬蟲(chóng)框架
Python庫(kù)之網(wǎng)絡(luò)爬蟲(chóng)
Scrapy:Python數(shù)據(jù)分析 次應(yīng)用庫(kù)
Python庫(kù)之網(wǎng)絡(luò)爬蟲(chóng)
pyspider:強(qiáng)大的Web頁(yè)面爬取系統(tǒng)
提供了完整的網(wǎng)頁(yè)爬取系統(tǒng)構(gòu)建功能
支持?jǐn)?shù)據(jù)庫(kù)后端、消息隊(duì)列、優(yōu)先級(jí)、分布式架構(gòu)等
Python重要的網(wǎng)絡(luò)爬蟲(chóng)類第 庫(kù)
Python庫(kù)之網(wǎng)絡(luò)爬蟲(chóng)
pyspider:強(qiáng)大的Web頁(yè)面爬取系統(tǒng)
Python庫(kù)之Web信息提取
CCBY-NC-SA4.0嵩天
Python庫(kù)之Web信息提取
BeautifulSoup:HTML和XML的解析庫(kù)
提供了解析HTML和XML等Web信息的功能
又名beautifulsoup4或bs4，可以加載多種解析引擎
常與網(wǎng)絡(luò)爬蟲(chóng)庫(kù)搭配使用，如Scrapy、requests等
Python庫(kù)之Web信息提取
BeautifulSoup:HTML和XML的解析庫(kù)
下行遍歷
.contents
.children
.descendants
<html>
<head> <body>
<title> <p> 平行遍歷 <p>
<b>.next_sibling<a>
<a>
.parent
.parents
上行遍歷
.previous_sibling
.next_siblings
.previous_siblings
Python庫(kù)之Web信息提取
Re:正則表達(dá)式解析和處理功能庫(kù)
提供了定義和解析正則表達(dá)式的一批通用功能
可用于各類場(chǎng)景，包括定點(diǎn)的Web信息提取
Python最主要的標(biāo)準(zhǔn)庫(kù)之一，無(wú)需安裝
Python庫(kù)之Web信息提取
Re:正則表達(dá)式解析和處理功能庫(kù)
re.search() re.split()
re.match()re.findall()
r'\d{3}-\d{8}|\d{4}-\d{7}'
re.finditer()re.sub()
Python庫(kù)之Web信息提取
Python-Goose:提取文章類型Web頁(yè)面的功能庫(kù)
提供了對(duì)Web頁(yè)面中文章信息/ 等元數(shù)據(jù)的提取功能
針對(duì)特定類型Web頁(yè)面，應(yīng)用覆蓋面較廣
Python最主要的Web信息提取庫(kù)
Python庫(kù)之Web信息提取
Python-Goose:提取文章類型Web頁(yè)面的功能庫(kù)
fromgooseimportGoose
url=''g=Goose({'use_meta_language':False,'target_language':'es'})article=g.extract(url=url)
article.cleaned_text[:150]
Python庫(kù)之Web開(kāi)發(fā)
CCBY-NC-SA4.0嵩天
Python庫(kù)之Web 開(kāi)發(fā)
Django:最流行的Web應(yīng)用框架
提供了構(gòu)建Web系統(tǒng)的基本應(yīng)用框架
MTV模式：模型(model)、模板(Tem te)、視圖(Views)
Python最重要的Web應(yīng)用框架，略微復(fù)雜的應(yīng)用框架
Python庫(kù)之Web 開(kāi)發(fā)
Django:最流行的Web應(yīng)用框架
Web框架
瀏覽器
HTTP
WSGI
URLs
HTML/CSS/JS
路由
功能處理邏輯
等文件
Web服務(wù)器接口
滿足用戶功能請(qǐng)求
融合數(shù)據(jù)和展示模板
數(shù)據(jù)庫(kù)
Python庫(kù)之Web 開(kāi)發(fā)
Pyramid:規(guī)模適中的Web應(yīng)用框架
提供了簡(jiǎn)單方便構(gòu)建Web系統(tǒng)的應(yīng)用框架
不大不小，規(guī)模適中，適合快速構(gòu)建并適度擴(kuò)展類應(yīng)用
Python產(chǎn)品級(jí)Web應(yīng)用框架，起步簡(jiǎn)單可擴(kuò)展性好
Python庫(kù)之Web 開(kāi)發(fā)
Pyramid:規(guī)模適中的Web應(yīng)用框架
fromwsgiref.simple_serverimportmake_server
frompyramid.configimportConfiguratorfrompyramid.responseimportResponsedef o_world(request):
returnResponse(' oWorld!')
ifname=='main':
withConfigurator()asconfig:config.add_route(' o','/')
-10行左右 oWord程序
config.add_view( o_world,route_name=' o')app=config.make_wsgi_app()
server=make_server('',6543,app)server.serve_forever()
Python庫(kù)之Web 開(kāi)發(fā)
Flask:Web應(yīng)用開(kāi)發(fā)微框架
提供了最簡(jiǎn)單構(gòu)建Web系統(tǒng)的應(yīng)用框架
特點(diǎn)是：簡(jiǎn)單、規(guī)模小、快速
Django>Pyramid>Flask
Python庫(kù)之Web 開(kāi)發(fā)
Flask:Web應(yīng)用開(kāi)發(fā)微框架
fromflaskimportFlaskapp=Flask(name)
@app.route('/')def o_world():
return' o,World!'
Python庫(kù)之網(wǎng)絡(luò)應(yīng)用開(kāi)發(fā)
CCBY-NC-SA4.0嵩天
Python庫(kù)之網(wǎng)絡(luò)應(yīng)用開(kāi)發(fā)
WeRoBot: 開(kāi)發(fā)框架
提供了解析 服務(wù)器消息及反饋消息的功能
建立 機(jī)器人的重要技術(shù)
Python庫(kù)之Web 開(kāi)發(fā)
WeRoBot: 開(kāi)發(fā)框架
importwerobot
robot=werobot.WeRoBot(token='tokenhere')
@robot.handler
def o(message):return' oWorld!'
對(duì) 每個(gè)消息反饋一個(gè) oWorld
Python庫(kù)之網(wǎng)絡(luò)應(yīng)用開(kāi)發(fā)
aip: AI開(kāi)放平臺(tái)接口
提供了 AI服務(wù)的Python功能接口
語(yǔ)音、人臉、OCR、NLP、知識(shí)圖譜、圖像搜索等領(lǐng)域
Python AI應(yīng)用的最主要方式
Python庫(kù)之Web 開(kāi)發(fā)
aip: AI開(kāi)放平臺(tái)接口
Python庫(kù)之網(wǎng)絡(luò)應(yīng)用開(kāi)發(fā)
MyQR: 生成第 庫(kù)
提供了生成 的系列功能
基本 、藝術(shù) 和動(dòng)態(tài)
P
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明，都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等，如果需要附件，請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙，網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽，若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間，僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理，對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯，并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容，請(qǐng)與我們聯(lián)系，我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 安全評(píng)價(jià)的程序、內(nèi)容、方法
- 中職學(xué)校編制調(diào)研報(bào)告
- 2025年建筑水利市政公路三類人員-新疆建筑三類人員考試歷年參考題庫(kù)含答案解析(5套典型考題)
- 2025年建筑八大員(九大員)住房城鄉(xiāng)建設(shè)領(lǐng)域現(xiàn)場(chǎng)專業(yè)人員考試-土建質(zhì)量員質(zhì)檢員歷年參考題庫(kù)含答案解析(5套典型考題)
- 2025年大學(xué)試題(財(cái)經(jīng)商貿(mào))-電子商務(wù)歷年參考題庫(kù)含答案解析(5套典型考題)
- 2025年大學(xué)試題(財(cái)經(jīng)商貿(mào))-包裝概論歷年參考題庫(kù)含答案解析(5套典型考題)
- 2025年大學(xué)試題(計(jì)算機(jī)科學(xué))-計(jì)算機(jī)數(shù)據(jù)庫(kù)系統(tǒng)原理歷年參考題庫(kù)含答案解析(5套典型考題)
- 2025年大學(xué)試題(計(jì)算機(jī)科學(xué))-數(shù)據(jù)庫(kù)原理與應(yīng)用歷年參考題庫(kù)含答案解析(5套典型考題)
- 高中心靈起航心理健康課
- 2025年大學(xué)試題(管理類)-管理系統(tǒng)信息技術(shù)應(yīng)用歷年參考題庫(kù)含答案解析(5套典型考題)
- 寧都黃雞-標(biāo)準(zhǔn)
- 高中化學(xué)知識(shí)結(jié)構(gòu)圖
- 第04章 CIE標(biāo)準(zhǔn)色度系統(tǒng)
- 中國(guó)水痘疫苗行業(yè)投資分析、市場(chǎng)運(yùn)行態(tài)勢(shì)研究報(bào)告-智研咨詢發(fā)布（2024版）
- 【標(biāo)準(zhǔn)】城市森林碳匯計(jì)量監(jiān)測(cè)技術(shù)規(guī)程
- 個(gè)人對(duì)公司借款協(xié)議范本
- 行政執(zhí)法資格證法律知識(shí)考試復(fù)習(xí)題及答案
- 超市貨架油漆翻新協(xié)議樣本
- GB/T 44230-2024政務(wù)信息系統(tǒng)基本要求
- 電氣設(shè)計(jì)筆記：電纜熱穩(wěn)定校驗(yàn)計(jì)算表
- 中國(guó)吸管機(jī)行業(yè)市場(chǎng)現(xiàn)狀分析及競(jìng)爭(zhēng)格局與投資發(fā)展研究報(bào)告2024-2034版
評(píng)論
0/150
提交評(píng)論