将爬虫网页信息持久存储至Redis中（存储爬虫对象到redis）

将爬虫网页信息持久存储至Redis中

随着社会的发展，互联网信息变得越来越丰富，日益增多的网页信息也给人们带来了极大的方便，尤其是大量的网页爬虫技术，可以将网页上的信息进行提取，主要用于搜索引擎、大数据应用等，但是抓取到的网页信息必须要得到持久保存，才能给实际应用带来价值。很多的信息存储系统都可以实现这一功能，但性能却不能很好的满足实际的需要，特别是对于大量的实时数据和海量的存储空间，这就需要一种新型的存储系统，Redis 正是这样一种高性能高可扩展的存储系统。

Redis 是一个开源的内存数据库，它将实际存储的对象放置到特殊的数据结构中，基于内存的特点可以提供出色的读写性能，处理海量数据的性能更平滑。在网页爬虫抓取信息之后，我们可以借助Redis来进行实时的信息存储，如此一来，就可以实现大量的信息的持久储存了，当然，要将网页爬虫信息存储至Redis中，还需要对代码进行编写。

要实现将爬虫信息持久存储至Redis中，首先需要连接Redis服务器，方法是：

// 连接Redis服务端
Connection redis = new Connection("localhost", 6379);

接着，需要将抓取的网页信息使用字符串的格式进行存储：

// 存储爬虫信息
String infoString = json.toString();
redis.set("spider:info:1", infoString);

断开和Redis服务器的连接：

// 关闭Redis服务端连接
redis.close();

Redis 由于其强大的存储性能，可以很好的将爬虫网页信息进行持久存储，从而为实际应用带来极大的价值。由此可见，Redis 无疑是一款非常实用的存储系统，也是相当受欢迎的。