中从微博中收集数据，存储至redis（爬取微博数据到redis）

使用微博的API收集数据并存储至redis是一个很有价值的工作，类似开发的功能经常被用在众多的地方。比如你可以用它写一个新闻精制程序，通过它收集实时消息，从而了解当前社会发生了什么事情。以下是开发此功能的一些步骤：

一、使用微博API来收集数据

使用微博API有多种不同的方法。你可以使用REST API访问public timeline，也可以使用streaming API来从微博获取实时数据。例如，可以使用以下代码来收集热门微博：

url = 'https://api.weibo.com/2/statuses/public_timeline.json?'
params = {
    'count':20,
    'page':1
}
response = requests.get(url=url, params=params)
data = response.json()

上述代码可以从微博获取最新的20条热门微博，返回的数据是json格式的，它包含微博的相关信息，你可以提取这些信息，比如用户名、发布时间、消息等。

二、将数据存储到redis

拿到数据后，接下来要将其存储到redis中。可以使用Python中内置的redis模块，来连接到redis数据库，比如以下代码：

import redis
r = redis.Redis(host='localhost', port=6379, db=0)

使用redis.hmset方法可以将信息存储到redis中，其使用方法如下：

r.hmset('name', {'username':'xxx', 'content':'xxx', 'time':'xxx'})

上面代码可以将username，content，time这三个字段存储到redis中，name为key，三个字段为字典的value。

三、取出redis中的数据

从redis中取出数据很容易，可以使用redis.hgetall方法：

data = r.hgetall('name')

上面这行代码会返回name对应的数据，是一个字典格式的数据，可以轻松得取出username，content，time三个字段。

总结:

通过分析可以得出，使用微博API收集数据，并存储至redis中是非常实用的，也非常容易实现。包括使用REST API访问public timeline，使用streaming API来收集实时消息，利用Python的redis模块从redis中取出信息，都是实现此功能所必需的。