python下载大文件(爬虫大体积文件下载模块)

Python 爬虫爬取视频等大体积文件时，使用requests.get(url) 方法需要等该文件缓存进内存完之后才开始保存进硬盘，这样会导致测试代码的时候很长时间没有反应。本模块可以实现缓存多少便保存至硬盘多少的功能，不会出现运行很久而代码区没有反应的问题。