爬虫 [4]

Python爬取小说并写入word文档 置顶

Python爬取小说并写入word文档

喜欢看小说?上班摸鱼不敢明目张胆的看?看小说还要充钱?这年头,不存在的!从网络上扒数据,写到word文档,免费还能掩人耳目,美哉!美哉!

Python与Amazon DynamoDB:构建高效爬虫数据存储解决方案

本文介绍了如何使用Python和Amazon DynamoDB构建高效的爬虫数据存储方案。文章讲解了DynamoDB作为NoSQL数据库的特点,如高吞吐量、低延迟和灵活的数据结构,并通过代码示例展示了如何创建表、操作数据以及爬取Bing搜索结果并存储到DynamoDB中。此方案适合大规模数据存储,为爬虫开发者提供了实用指导,助力高效数据管理。

爬取美女图片保存本地与入MySQL库

本文详细记录如何爬取美女图片,并将图片下载保存在本地,同时将图片url进行入库。保存在本地肯定是为了没事能拿出来养养眼啊,那入库就是为了定位图片啊,要懂点技术的话,还能搬运搬运做个小图片网站,不为别的,就是养眼和学习!本文主要讲思路和方法,源码、数据库、图片文件获取方式见文末!

2021最新微博爬虫——根据话题名称获取所有相关微博与评论

自己写的一个爬虫,可以根据话题名称对其微博内容、评论内容、微博发布者相关信息进行爬取,目前作者测试是没有特别的问题的。