① Python通過百度全景圖API爬取街景圖像
要通過Python通過網路全景圖API爬取街景圖像，可以按照以下步驟進行：
獲取AK碼：
- 在網路地圖開放平台進行開發者認證。
- 創建應用並設置好相關參數，獲取個人AK碼。
使用全景坐標拾取工具：
- 利用網路官方提供的全景坐標拾取工具選取特定地點。
- 工具中的參數包括搜索目標區域、當前區域坐標及視角角度。
- 根據需要調整參數，如增加fov和調整解析度，以獲取更完整的360°全景圖。
編寫Python代碼：
- 批量製作location坐標txt文件。
- 編寫非同步讀取並下載圖片的Python代碼。
- 代碼應具有可復用性，通過函數實現，傳入location列表下載對應視角的圖像。
- 在代碼中使用獲取的AK碼進行API請求，並處理返回的全景圖像數據。
注意： 在進行API請求時，請確保遵守網路地圖開放平台的使用條款和限制。 批量下載圖片時，要注意控制請求頻率，避免對伺服器造成過大壓力。 獲取的全景圖像數據可能需要進行進一步處理，如拼接、裁剪等，以滿足具體應用場景的需求。
② [Python爬蟲]京東評價內容爬取文字、圖片、視頻
Python爬蟲爬取京東評價內容的步驟如下：
導入所需模塊：
- 需要導入如requests、BeautifulSoup、re等模塊。
定義去表情函數：
- 由於評價內容中可能包含表情符號，可以定義一個函數來去除這些表情，以便後續處理文本內容。
偽裝與計數設置：
- 登錄京東：確保你已經在京東網站登錄，並獲取到有效的Cookies和useragent。
- 檢查網路請求：使用瀏覽器的開發者工具，清除網路日誌後重新載入評價內容，以找到包含評價數據的API請求。
- 記錄頁碼參數：注意API請求URL中的頁碼參數，這將用於後續遍歷多頁評價。
- 復制Cookies和useragent：將瀏覽器的Cookies和useragent復制到Python腳本的請求頭中，以偽裝成正常用戶訪問。
使用循環遍歷評價頁面：
- 構造URL：根據記錄的頁碼參數，構造用於請求不同頁面的URL。
- 遍歷文字評論：發送請求獲取評價數據，使用BeautifulSoup或正則表達式解析出文字評論內容。
- 解析圖片鏈接：同樣地，解析出評價中的圖片鏈接，這些鏈接通常可以直接用於下載圖片。
- 處理視頻鏈接：如果評價中包含視頻，解析出視頻的鏈接或嵌入代碼。注意，視頻的處理可能更加復雜，因為可能需要額外的步驟來下載或播放視頻。
- 輸出評論數量並設定終止條件：在遍歷過程中，記錄已處理的評論數量，並根據需要設定終止條件。
完成：
- 將爬取到的文字、圖片和視頻鏈接保存到本地文件或資料庫中，以便後續分析或使用。
注意事項： 在進行網頁爬蟲時，請務必遵守目標網站的robots.txt文件規定和相關法律法規。 頻繁訪問目標網站可能導致IP被封禁，因此建議合理設置請求間隔或使用代理IP。 如果目標網站有反爬蟲機制，可能需要額外的處理步驟來繞過這些機制。