正則爬取京東商品信息并打包成.exe可執行程序
更新時間：2019-09-09 03:00:55 作者：佚名 
我要評論(0)
本文爬取內容，輸入要搜索的關鍵字可自動爬取京東網站上相關商品的店鋪名稱，商品名稱，價格，爬取100頁（共100頁）
代碼如下；
import requests
import
代碼如下；
import requests
import
本文爬取內容，輸入要搜索的關鍵字可自動爬取京東網站上相關商品的店鋪名稱，商品名稱，價格，爬取100頁（共100頁）
代碼如下；
import requests
import re
# 請求頭
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36'
}
def get_all(url,key):
for page in range(1,200,2):
params = {
'keyword':key,
'enc':'utf-8',
'page':page
}
num = int((int(page)+1)/2)
try:
response = requests.get(url=url,params=params,headers=headers)
# 轉碼
content = response.text.encode(response.encoding).decode(response.apparent_encoding)
data_all = re.findall('<div class="p-price">.*?<i>(.*?)</i>.*?<div class="p-name p-name-type-2">.*?title="(.*?)"'
'.*?<div class="p-shop".*?title="(.*?)"',content,re.S)
for i in data_all:
with open(key + '.txt', 'a+', encoding='utf-8') as f:
f.write('店鋪名稱：' + i[2]+'\n'+'商品名稱：'+i[1]+'\n'+'價格:'+i[0]+'\n\n')
print('第'+str(num)+'頁'+'數據下載中....')
except Exception as e:
print(e)
if __name__ == '__main__':
print('輸入要搜索的內容，獲取京東商城里面的商品名稱，店鋪名稱，商品價格')
key = input('輸入搜索內容：')
url = 'https://search.jd.com/Search?'
get_all(url,key)
打包成.exe可執行文件。
需要用到pyinstaller包pip下載；
pip install pyinstaller
在線制作一個.ico圖標，用來當程序圖片，把圖標和程序放在同一個文件夾下，
在.py文件目錄下打開命令行窗口，執行打包命令；
E:\練習\最后階段\0808\jd1>pyinstaller -F -i dog.ico jd.py
出現successfully表示打包成功；
27525 INFO: Building EXE from EXE-00.toc completed successfully.
可執行程序在當前文件夾下的dist文件夾下；
運行效果；
可同時執行多個程序；
輸出結果；
done。
總結
以上所述是小編給大家介紹的正則爬取京東商品信息并打包成.exe可執行程序,希望對大家有所幫助，如果大家有任何疑問請給我留言，小編會及時回復大家的。在此也非常感謝大家對腳本之家網站的支持！
如果你覺得本文對你有幫助，歡迎轉載，煩請注明出處，謝謝！
您可能感興趣的文章:
- python正則表達式爬取貓眼電影top100
- python爬蟲 正則表達式使用技巧及爬取個人博客的實例講解
- C語言正則表達式詳解 regcomp() regexec() regfree()用法詳解
- 正則表達式中test、exec、match的區別介紹及括號的用法
- 全面解析JS字符串和正則表達式中的match、replace、exec等函數
- js正則表達式test()和exec()用法實例
- js正則表達式中test,exec,match方法的區別說明
- js正則函數match、exec、test、search、replace、split使用介紹集合
- js的正則test,match,exec詳細解析
您可能感興趣的文章:
相關文章
- Linux grep 命令用于查找文件里符合條件的字符串。grep 指令用于查找內容包含指定的范本樣式的文件，如果發現某文件的內容符合所指定的范本樣式，預設 grep 指2019-09-09
正則表達式 本節我們看一下正則表達式的相關用法，正則表達式是處理字符串的強大的工具，它有自己特定的語法結構，有了它，實現字符串的檢索、替換、匹配驗證2019-09-09- 本文爬取內容，輸入要搜索的關鍵字可自動爬取京東網站上相關商品的店鋪名稱，商品名稱，價格，爬取100頁（共100頁） 代碼如下； import requests import2019-09-09
字符串 可以使用單引號和雙引號定義字符串變量但是單引號中不支持變量解析 #! /bin/bash username="mayuan" str_1="hello ${username}" str_2='hello ${us2019-09-09- Linux常用命令 - 已學 cd （路徑的切換） rm（后接-rf 可刪除文件或文件夾） ls（查看當前路徑下的文件和文件夾） mkdir（創建文件夾） touch（創建2019-09-09
- python從字符串中提取數字 使用正則表達式，用法如下： ## 總結 ## ^ 匹配字符串的開始。 ## $ 匹配字符串的結尾。 ## \b 匹配一個單詞的邊界。 ## \d 匹配2019-09-09
- 最近在學習sed和awk時，發現了一本入門級別的好書：《Software Design 中文版 03》。 我們這里的日歷程序也是從那里得來，這里強烈推薦希望了解sed和awk的2019-09-09
- 一.問題描述 在調試一個問題的時候，socket始終連接不上，返回的句柄大約是1030左右。開始的時候是好的，運行一段時間后出現的問題。 二.問題分析 問題過去有2019-09-09
- 01 經典解釋 單引號：所見即所得 雙引號：所見非所得，它會先把變量解析之后，再輸出 反引號（``） ：命令替換，通常用于把命令輸出結果傳給入變量中 反斜杠(2019-09-09
java正則表達式獲取大括號小括號內容并判斷數字和小數親測可用
獲取大括號小括號內容 項目開發用到了，暫做個簡單記錄 private static String regex = "\\{([^}]*)\\}";//匹配大括號 private static String regexx = "2019-09-09
最新評論