本文爬取內(nèi)容,輸入要搜索的關(guān)鍵字可自動爬取京東網(wǎng)站上相關(guān)商品的店鋪名稱,商品名稱,價格,爬取100頁(共100頁)
代碼如下;
import requests
import re
# 請求頭
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36'
}
def get_all(url,key):
for page in range(1,200,2):
params = {
'keyword':key,
'enc':'utf-8',
'page':page
}
num = int((int(page)+1)/2)
try:
response = requests.get(url=url,params=params,headers=headers)
# 轉(zhuǎn)碼
content = response.text.encode(response.encoding).decode(response.apparent_encoding)
data_all = re.findall('div class="p-price">.*?i>(.*?)/i>.*?div class="p-name p-name-type-2">.*?title="(.*?)"'
'.*?div class="p-shop".*?title="(.*?)"',content,re.S)
for i in data_all:
with open(key + '.txt', 'a+', encoding='utf-8') as f:
f.write('店鋪名稱:' + i[2]+'\n'+'商品名稱:'+i[1]+'\n'+'價格:'+i[0]+'\n\n')
print('第'+str(num)+'頁'+'數(shù)據(jù)下載中....')
except Exception as e:
print(e)
if __name__ == '__main__':
print('輸入要搜索的內(nèi)容,獲取京東商城里面的商品名稱,店鋪名稱,商品價格')
key = input('輸入搜索內(nèi)容:')
url = 'https://search.jd.com/Search?'
get_all(url,key)
打包成.exe可執(zhí)行文件。
需要用到pyinstaller包pip下載;
pip install pyinstaller
在線制作一個.ico圖標,用來當程序圖片,把圖標和程序放在同一個文件夾下,
![](/d/20211017/24cc4d6068f13bc5724cb41f4c59ca65.gif)
![](/d/20211017/650bdf8d5f1a15cf009524790632ac36.gif)
在.py文件目錄下打開命令行窗口,執(zhí)行打包命令;
E:\練習\最后階段\0808\jd1>pyinstaller -F -i dog.ico jd.py
出現(xiàn)successfully表示打包成功;
27525 INFO: Building EXE from EXE-00.toc completed successfully.
可執(zhí)行程序在當前文件夾下的dist文件夾下;
![](/d/20211017/e41276d5572ba0694dd449b51ef05c61.gif)
運行效果;
![](/d/20211017/49d17125a07790f43d33af41104581e8.gif)
可同時執(zhí)行多個程序;
![](/d/20211017/5b4de7b5b18ccb6149f559a890f6ce24.gif)
輸出結(jié)果;
![](/d/20211017/0a55e008826a07d7d8bb28f611a5a098.gif)
done。
總結(jié)
以上所述是小編給大家介紹的正則爬取京東商品信息并打包成.exe可執(zhí)行程序,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復(fù)大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
如果你覺得本文對你有幫助,歡迎轉(zhuǎn)載,煩請注明出處,謝謝!
您可能感興趣的文章:- python正則表達式爬取貓眼電影top100
- python爬蟲 正則表達式使用技巧及爬取個人博客的實例講解
- C語言正則表達式詳解 regcomp() regexec() regfree()用法詳解
- 正則表達式中test、exec、match的區(qū)別介紹及括號的用法
- 全面解析JS字符串和正則表達式中的match、replace、exec等函數(shù)
- js正則表達式test()和exec()用法實例
- js正則表達式中test,exec,match方法的區(qū)別說明
- js正則函數(shù)match、exec、test、search、replace、split使用介紹集合
- js的正則test,match,exec詳細解析