如何收集天貓數據

A. 如何抓取天貓和淘寶的運營數據

數據這個東西太多，沒有人會了比較好的解釋，這樣說吧，每個類目的數據都不一樣，每一個類目對應該的人群也不一樣，就比如說你找了一個買衣服類目的數據，但是你是做汽車用品的，那就沒有用了，可能是女裝，女裝可能誰都可以買的起，買了有用，但是汽車用品就一樣了，不有汽車的人買了沒有用；如果是要找類目的，，這個可以給你做參考，你可以去找十來家同類目的商家，來比較自己的缺點，你的定位人群是不是有誤，各方面等，你要知道這個買的不是別的就是一張圖，買的就是圖片。

B. 如何爬蟲天貓店鋪數據python

本編博客是關於爬取天貓店鋪中指定店鋪的所有商品基礎信息的爬蟲，爬蟲運行只需要輸入相應店鋪的域名名稱即可，信息將以csv表格的形式保存，可以單店爬取也可以增加一個循環進行同時爬取。

源碼展示

首先還是完整代碼展示，後面會分解每個函數的意義。

# -*- coding: utf-8 -*-
import requests
import json
import csv
import random
import re
from datetime import datetime
import time

class TM_procs(object):
def __init__(self,storename):
self.storename = storename
self.url = ''.format(storename)
self.headers = {
"user-agent":"Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 "
"(KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1"
}
datenum = datetime.now().strftime('%Y%m%d%H%M')
self.filename = '{}_{}.csv'.format(self.storename, datenum)
self.get_file()

def get_file(self):
'''創建一個含有標題的表格'''
title = ['item_id','price','quantity','sold','title','totalSoldQuantity','url','img']
with open(self.filename,'w',newline='') as f:
writer = csv.DictWriter(f,fieldnames=title)
writer.writeheader()
return

def get_totalpage(self):
'''提取總頁碼數'''
num = random.randint(83739921,87739530)
enrl = '/shop/shop_auction_search.do?sort=s&p=1&page_size=12&from=h5&ajson=1&_tm_source=tmallsearch&callback=jsonp_{}'
url = self.url + enrl.format(num)
html = requests.get(url,headers=self.headers).text
infos = re.findall('(({.*}))',html)[0]
infos = json.loads(infos)
totalpage = infos.get('total_page')
return int(totalpage)

def get_procts(self,page):
'''提取單頁商品列表'''
num = random.randint(83739921, 87739530)
enrl = '/shop/shop_auction_search.do?sort=s&p={}&page_size=12&from=h5&ajson=1&_tm_source=tmallsearch&callback=jsonp_{}'
url = self.url + enrl.format(page,num)
html = requests.get(url, headers=self.headers).text
infos = re.findall('(({.*}))', html)[0]
infos = json.loads(infos)
procts = infos.get('items')
title = ['item_id', 'price', 'quantity', 'sold', 'title', 'totalSoldQuantity', 'url', 'img']
with open(self.filename, 'a', newline='') as f:
writer = csv.DictWriter(f, fieldnames=title)
writer.writerows(procts)

def main(self):
'''循環爬取所有頁面寶貝'''
total_page = self.get_totalpage()
for i in range(1,total_page+1):
self.get_procts(i)
print('總計{}頁商品，已經提取第{}頁'.format(total_page,i))
time.sleep(1+random.random())

if __name__ == '__main__':
storename = 'uniqlo'
tm = TM_procs(storename)
tm.main()

上面代碼是選擇了優衣庫作為測試店鋪，直接輸入優衣庫店鋪的域名中關鍵詞即可，最終表格會按照店鋪名稱和時間名詞。

代碼解讀

導入庫說明

• requests庫不用多數，爬取網頁的主要庫

• json庫是用來解析 json 格式的數據的，也就是 Python 中的字典格式

• csv庫是用來創建 csv 表格和保存信息的

• random庫是用來生成一個隨機數的，這個代碼中用到了兩次，第一次是生成一個隨機數據去獲取最新的網頁信息而不是緩存信息，第二次是隨機一個時間，來減緩爬蟲速度

• re庫是正則，主要用來提取信息

• datetime和time都是時間庫，前者一般用來生成當前時間字元串，後者本爬蟲使用設置延遲時間

爬蟲思路

• 首先通過分析手機端天貓店鋪所有商品的網頁，可以發現每次下滑一頁都有一個 js 被載入，這個 js 的規律可以總結一下；

• 通過分析可以發現每次請求 js 都可以得到一個關鍵信息，那就是 total_page 這個參數，這也一想就能猜到，就是當前店鋪的總頁碼數，所以可以先取得這個數字，然後使用循環爬取全店商品；

• 每一頁有24個商品，而請求得到的是一個類似於 json 格式的網頁信息，但是並非是直接的 json,所以可以用正則表達式提取符合 json 格式的部分留用；

• 將每一頁的信息保存到 csv 表格中，可以直接使用 csv 庫的字典存儲方式，非常方便；

• 得到了單頁的信息，也得到了總頁碼數，只需要一個循環就可以爬取全店的商品了。

構造爬蟲類

• def __init__(self,storename):


• self.storename = storename


• self.url = '.format(storename)


• self.headers = {


• "user-agent":"Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 "


• "(KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1"


• }


• datenum = datetime.now().strftime('%Y%m%d%H%M')


• self.filename = '{}_{}.csv'.format(self.storename, datenum)


• self.get_file()



上面代碼依次完成以下操作：

• 首先整個爬蟲是寫成了一個類，在初始化類的時候需要傳遞一個參數，這個參數就是店鋪的名稱。

• 然後構造出店鋪的所有商品頁面的前半部分，這部分都是不會變的

• 接著設置一個請求頭

• 按照當前時間生成一個以時間為依據的字元串，用來給文件命名，然後賦值給文件名稱，確定保存文件的名稱

• 最後一句是在類生成的時候就運行這個函數，及生成一個帶有標題的表格，後面會說道這個函數的具體含義

C. 如何查看天貓數據

天貓是一個發展十分迅速的平台，互聯網的興起讓線上平台的發展速度也快了起來，入駐天貓商城的商家資質也非常嚴格，具體的可以參考愛開淘網站上的內容來了解。對於商家們來說想要運營好自己的店鋪，必不可少的就是數據的積累，通過對這些歷史數據進行分析，能夠制定出好的推廣策略，找到更加適合自己店鋪的營銷方法，這也是很多天貓商家們迫切需要了解的內容。本文也會簡單介紹一下如何查看天貓運營數據，通過這些數據能夠做好店鋪的運營工作。

一、點擊率

1.查看路徑

在生意參謀-經營分析-商品效果頁面內進行查詢。

2.重點查看內容

第一，店鋪內商品的點擊率不能低於3%，一定要趕緊分析原因，找到問題之後趕緊解決。一般影響點擊率的原因是產品主圖，價格以及店鋪基礎銷量。如果商品的點擊率超過10%以上，相信你的店鋪會迎來一個銷量的爆發。

第二，想要查看點擊率要選擇PC端的數據，經過分析只有PC端的點擊率數據指標才更准確，更有參考價值，如果數據的指標維度小的話，可以將時間定在7天，這樣獲得的數據才更有參考價值。

二、收藏率，加購率

1.查看路徑

生意參謀-經營分析-商品效果

2.重點查看內容

第一，如果店鋪和商品的收藏率和加購率能夠保證在10%以上，店鋪的流量就獲得一個火爆的增長，自然能夠獲得的成交量也會更多。

第二，要時刻了解影響收藏率和加購率的因素包括：詳情頁的設置以及精美程度，吸引消費者的優惠活動力度，客服溝通的技巧，客戶的評論情況等。

第三，如果篩選的數據維度不夠的話，還是要選擇7天的數據作為參考，這樣得出的數據准確率才更高一些。

三、轉化率

1.查看路徑

生意參首核心指標

2.重點查看內容

經過一段時間的運營，店鋪的轉化率肯定會發生變化，權重會逐漸增加，想要獲得更高的轉化率需要的就是不斷的優化店鋪內商品的頁面設置，以及多進行一些吸引人訪問的活動，這樣消費者會更願意在頁面上停留，對於店鋪來說也會有更好的幫助。

天貓店鋪的數據還包括銷量，流量以及訂單量等指標，每一個數據之間都是相輔相成的關系，任何一個數據都不能被忽視，這樣才能夠通過這些數據綜合評判出店鋪運營情況，從而找到更好的方法。

D. 如何獲取京東,天貓某一品牌或者某一行業的銷量數據有什麼工具或者方法

1、看它們官方發布的數據
2、找內部知情工作人員
3、尋求市場調研機構的幫助（比如Nielsen尼爾森）

E. 如何統計分析雙十一天貓數據

首先說一個眾所周知的數據：2017年雙十一天貓成交額1682億。

數據來源：網路整理

涉及工具：BDP個人版、微輿情、微指數、wordart

F. 使用天貓平台在前台可以收集哪些數據

售價、評價數、庫存、歷史最低價、店鋪名稱等
「天貓」（英文：Tmall，亦稱淘寶商城、天貓商城）原名淘寶商城，是一個綜合性購物網站。2012年1月11日上午，淘寶商城正式宣布更名為「天貓」。2012年3月29日天貓發布全新Logo形象。2012年11月11日，天貓借光棍節大賺一筆，宣稱13小時賣100億，創世界紀錄。天貓是馬雲淘寶網全新打造的B2C（Business-to-Consumer，商業零售）。其整合數千家品牌商、生產商，為商家和消費者之間提供一站式解決方案。提供100%品質保證的商品，7天無理由退貨的售後服務，以及購物積分返現等優質服務。2014年2月19日，阿里集團宣布天貓國際正式上線，為國內消費者直供海外原裝進口商品。
2018年11月26日，天貓升級為「大天貓」，形成天貓事業群、天貓超市事業群、天貓進出口事業部三大板塊。2019年03月06日，蔣凡接替靖捷，任天貓總裁。
2019年9月7日，中國商業聯合會、中華全國商業信息中心發布2018年度中國零售百強名單，天貓排名第1位[1]2019年12月12日，《匯桔網·2019胡潤品牌榜》發布，天貓以3200億元品牌價值排名第三，上榜2019最具價值中國民營品牌十強,排名第一。

G. 怎麼可以查到淘寶、天貓的銷售數據、交易額、以及各分類的所佔比列

淘寶 天貓的數據明細是可以通過做數據分析出的，不過需要做很多數據的收集已經分析，一般高級的電商負責人已經運營都是有類似的數據分析的