① Python通过百度全景图API爬取街景图像
要通过Python通过网络全景图API爬取街景图像，可以按照以下步骤进行：
获取AK码：
- 在网络地图开放平台进行开发者认证。
- 创建应用并设置好相关参数，获取个人AK码。
使用全景坐标拾取工具：
- 利用网络官方提供的全景坐标拾取工具选取特定地点。
- 工具中的参数包括搜索目标区域、当前区域坐标及视角角度。
- 根据需要调整参数，如增加fov和调整分辨率，以获取更完整的360°全景图。
编写Python代码：
- 批量制作location坐标txt文件。
- 编写异步读取并下载图片的Python代码。
- 代码应具有可复用性，通过函数实现，传入location列表下载对应视角的图像。
- 在代码中使用获取的AK码进行API请求，并处理返回的全景图像数据。
注意： 在进行API请求时，请确保遵守网络地图开放平台的使用条款和限制。 批量下载图片时，要注意控制请求频率，避免对服务器造成过大压力。 获取的全景图像数据可能需要进行进一步处理，如拼接、裁剪等，以满足具体应用场景的需求。
② [Python爬虫]京东评价内容爬取文字、图片、视频
Python爬虫爬取京东评价内容的步骤如下：
导入所需模块：
- 需要导入如requests、BeautifulSoup、re等模块。
定义去表情函数：
- 由于评价内容中可能包含表情符号，可以定义一个函数来去除这些表情，以便后续处理文本内容。
伪装与计数设置：
- 登录京东：确保你已经在京东网站登录，并获取到有效的Cookies和useragent。
- 检查网络请求：使用浏览器的开发者工具，清除网络日志后重新加载评价内容，以找到包含评价数据的API请求。
- 记录页码参数：注意API请求URL中的页码参数，这将用于后续遍历多页评价。
- 复制Cookies和useragent：将浏览器的Cookies和useragent复制到Python脚本的请求头中，以伪装成正常用户访问。
使用循环遍历评价页面：
- 构造URL：根据记录的页码参数，构造用于请求不同页面的URL。
- 遍历文字评论：发送请求获取评价数据，使用BeautifulSoup或正则表达式解析出文字评论内容。
- 解析图片链接：同样地，解析出评价中的图片链接，这些链接通常可以直接用于下载图片。
- 处理视频链接：如果评价中包含视频，解析出视频的链接或嵌入代码。注意，视频的处理可能更加复杂，因为可能需要额外的步骤来下载或播放视频。
- 输出评论数量并设定终止条件：在遍历过程中，记录已处理的评论数量，并根据需要设定终止条件。
完成：
- 将爬取到的文字、图片和视频链接保存到本地文件或数据库中，以便后续分析或使用。
注意事项： 在进行网页爬虫时，请务必遵守目标网站的robots.txt文件规定和相关法律法规。 频繁访问目标网站可能导致IP被封禁，因此建议合理设置请求间隔或使用代理IP。 如果目标网站有反爬虫机制，可能需要额外的处理步骤来绕过这些机制。