原文地址：https://www.jb51.net/article/167471.htm 很多时候我们需要过滤掉标点符号等特殊字符，网上虽然有一堆的方法，但是都没有找到一个非常满意的，有些过滤不了中文的标点符号，有些过滤不了英文的标点符号，有些过滤不全。 最后通过查看正则表达式文档，发现一个高效的办 […]

关键点，利用fiddler抓取手机app里的数据接口参数 抓取后的数据 爬虫处理文件deal.py import scrapy import bs4 import random import csv import requests import json from ..items import ne […]

在做爬虫项目时，出现了一个问题，解析一个网站二次爬取时没有获取到数据，就写了一个测试程序试了下，测试程序如下 import scrapy from scrapy.linkextractors import LinkExtractor from scrapy.spiders import CrawlS […]

接口需要通过fiddler来抓包获取，下载下来的图片是原始高清大图无水印 爬虫处理页面deal.py import scrapy import bs4 import csv from ..items import newsfoto2Item # 需要引用mrleItem，它在items里面。因为是i […]

UserWarning: Selenium support for PhantomJS has been deprecated, please use headless versions of Chrome or Firefox instead warnings.warn(‘Seleni […]

一、PhantomJS是什么？PhantomJS是一个基于webkit的javaScript API。它使用QtWebKit作为它核心浏览器的功能，使用webkit来编译解释执行javaScript代码。任何你可以基于在webkit浏览器做的事情，它都能做到。它不仅是个隐性的浏览器，提供了诸如css […]

图片信息也是存在元数据的，网上官方称之为exif(exchange image file format)，中文意思是交换图像文件格式。要注意的是有些图片是没有元数据的，比如压缩过的图片，元数据被破坏，无法探测，所以图片一定要是原图。如果你想用微信朋友圈，微博的图片来测试这次的代码，怕是没有希望了，因 […]

01 前言 在日常的生活中，大家偶尔会看到朋友圈发的照片由一张被切成九张的效果，有时由一张照片被切成九张照片所带来的视觉盛宴是不一样的！ 现在许多 P 图工具里面自带了这种功能，而微信小程序里也有专门可以切图的工具。为了熟练巩固的练习调库操作，今天就来带大家看看，如何用 Python 实现这个小功能 […]

1 前言Python中内置了几个非常好用的函数。 当你掌握了这几个函数的用法后，有些场景下，不用自己去实现多余的冗余代码编写，只需要调用这些函数，便能很简短的帮你实现功能。 今天来分享下两个函数的场景以及用法。 PS:下例子截图演示均在 jupyter notebook 中完成。 2 enumera […]

官方接口使用说明：https://cloud.tencent.com/document/product/382/11672 from qcloudsms_py import SmsMultiSender from qcloudsms_py.httpclient import HTTPError # […]