gtxyzz

微信亿级在线点赞系统,用Redis如何实现?

gtxyzz 运维技术 2022-11-19 440浏览 0

点赞功能大家都不会陌生,像微信这样的社交产品中都有,但别看功能小,想要做好需要考虑的东西还挺多的,如海量数据的分布式存储、分布式缓存、多 IDC 的数据一致性、访问路由到机房的算法等等。

微信亿级在线点赞系统,用Redis如何实现? 图片来 Pexels

本文介绍大型社交平台点赞系统的设计思路,基于 Spring Cloud,用户发起点赞、取消点赞后先存入 Redis 中,再每隔两小时从 Redis 读取点赞数据写入数据库中做持久化存储。

点赞、取消点赞是高频次的操作,若每次都读写数据库,大量的操作会影响数据库性能,所以需要做缓存。

至于多久从 Redis 取一次数据存到数据库中,根据项目的实际情况定吧,我是暂时设了两个小时。

项目需求需要查看都谁点赞了,所以要存储每个点赞的点赞人、被点赞人,不能简单的做计数。

文章分四部分介绍:

  • Redis 缓存设计及实现
  • 数据库设计
  • 数据库操作
  • 开启定时任务持久化存储到数据库

Redis 缓存设计及实现

Redis 安装及运行

Redis 安装请自行查阅相关教程。

说下Docker 安装运行 Redis:

dockerrun-d-p6379:6379redis:4.0.8

如果已经安装了 Redis,打开命令行,输入启动 Redis 的命令:

redis-server

Redis 与 Spring Boot 项目的整合

①在 pom.xml 中引入依赖:

<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-data-redis</artifactId>
</dependency>

②在启动类上添加注释 @EnableCaching:

@SpringBootApplication
@EnableDiscoveryClient
@EnableSwagger2
@EnableFeignClients(basePackages="com.solo.coderiver.project.client")
@EnableCaching
publicclassUserApplication{

publicstaticvoidmain(String[]args){
SpringApplication.run(UserApplication.class,args);
}
}

③编写 Redis 配置类 RedisConfig:

importcom.fasterxml.jackson.annotation.JsonAutoDetect;
importcom.fasterxml.jackson.annotation.PropertyAccessor;
importcom.fasterxml.jackson.databind.ObjectMapper;
importorg.springframework.boot.autoconfigure.condition.ConditionalOnMissingBean;
importorg.springframework.context.annotation.Bean;
importorg.springframework.context.annotation.Configuration;
importorg.springframework.data.redis.connection.RedisConnectionFactory;
importorg.springframework.data.redis.core.RedisTemplate;
importorg.springframework.data.redis.core.StringRedisTemplate;
importorg.springframework.data.redis.serializer.Jackson2JsonRedisSerializer;

importjava.net.UnknownHostException;


@Configuration
publicclassRedisConfig{

@Bean
@ConditionalOnMissingBean(name="redisTemplate")
publicRedisTemplate<String,Object>redisTemplate(
RedisConnectionFactoryredisConnectionFactory)
throwsUnknownHostException{

Jackson2JsonRedisSerializer<Object>jackson2JsonRedisSerializer=newJackson2JsonRedisSerializer<Object>(Object.class);
ObjectMapperom=newObjectMapper();
om.setVisibility(PropertyAccessor.ALL,JsonAutoDetect.Visibility.ANY);
om.enableDefaultTyping(ObjectMapper.DefaultTyping.NON_FINAL);
jackson2JsonRedisSerializer.setObjectMapper(om);

RedisTemplate<String,Object>template=newRedisTemplate<String,Object>();
template.setConnectionFactory(redisConnectionFactory);
template.setKeySerializer(jackson2JsonRedisSerializer);
template.setValueSerializer(jackson2JsonRedisSerializer);
template.setHashKeySerializer(jackson2JsonRedisSerializer);
template.setHashValueSerializer(jackson2JsonRedisSerializer);
template.afterPropertiesSet();
returntemplate;
}


@Bean
@ConditionalOnMissingBean(StringRedisTemplate.class)
publicStringRedisTemplatestringRedisTemplate(
RedisConnectionFactoryredisConnectionFactory)
throwsUnknownHostException{
StringRedisTemplatetemplate=newStringRedisTemplate();
template.setConnectionFactory(redisConnectionFactory);
returntemplate;
}
}

至此 Redis 在 Spring Boot 项目中的配置已经完成,可以愉快的使用了。

Redis 的数据结构类型

Redis 可以存储键与 5 种不同数据结构类型之间的映射,这5种数据结构类型分别为 String(字符串)、List(列表)、Set(集合)、Hash(散列)和 Zset(有序集合)。

下面来对这 5 种数据结构类型作简单的介绍:

微信亿级在线点赞系统,用Redis如何实现?

点赞数据在 Redis 中的存储格式

用 Redis 存储两种数据:

  • 一种是记录点赞人、被点赞人、点赞状态的数据。
  • 另一种是每个用户被点赞了多少次,做个简单的计数。

由于需要记录点赞人和被点赞人,还有点赞状态(点赞、取消点赞),还要固定时间间隔取出 Redis 中所有点赞数据,分析了下 Redis 数据格式中 Hash 最合适。

因为 Hash 里的数据都是存在一个键里,可以通过这个键很方便的把所有的点赞数据都取出。

这个键里面的数据还可以存成键值对的形式,方便存入点赞人、被点赞人和点赞状态。

设点赞人的 id 为 likedPostId,被点赞人的 id 为 likedUserId ,点赞时状态为 1,取消点赞状态为 0。

将点赞人 id 和被点赞人 id 作为键,两个 id 中间用 :: 隔开,点赞状态作为值。

所以如果用户点赞,存储的键为:likedUserId::likedPostId,对应的值为 1 。

取消点赞,存储的键为:likedUserId::likedPostId,对应的值为 0 。取数据时把键用 :: 切开就得到了两个id,也很方便。

在可视化工具 RDM 中看到的是这样子:

微信亿级在线点赞系统,用Redis如何实现?

操作 Redis

将具体操作方法封装到了 RedisService 接口里:

①RedisService.java

importcom.solo.coderiver.user.dataobject.UserLike;
importcom.solo.coderiver.user.dto.LikedCountDTO;

importjava.util.List;

publicinterfaceRedisService{

/**
*点赞。状态为1
*@paramlikedUserId
*@paramlikedPostId
*/
voidsaveLiked2Redis(StringlikedUserId,StringlikedPostId);

/**
*取消点赞。将状态改变为0
*@paramlikedUserId
*@paramlikedPostId
*/
voidunlikeFromRedis(StringlikedUserId,StringlikedPostId);

/**
*从Redis中删除一条点赞数据
*@paramlikedUserId
*@paramlikedPostId
*/
voiddeleteLikedFromRedis(StringlikedUserId,StringlikedPostId);

/**
*该用户的点赞数加1
*@paramlikedUserId
*/
voidincrementLikedCount(StringlikedUserId);

/**
*该用户的点赞数减1
*@paramlikedUserId
*/
voiddecrementLikedCount(StringlikedUserId);

/**
*获取Redis中存储的所有点赞数据
*@return
*/
List<UserLike>getLikedDataFromRedis();

/**
*获取Redis中存储的所有点赞数量
*@return
*/
List<LikedCountDTO>getLikedCountFromRedis();

}

②实现类 RedisServiceImpl.java

importcom.solo.coderiver.user.dataobject.UserLike;
importcom.solo.coderiver.user.dto.LikedCountDTO;
importcom.solo.coderiver.user.enums.LikedStatusEnum;
importcom.solo.coderiver.user.service.LikedService;
importcom.solo.coderiver.user.service.RedisService;
importcom.solo.coderiver.user.utils.RedisKeyUtils;
importlombok.extern.slf4j.Slf4j;
importorg.springframework.beans.factory.annotation.Autowired;
importorg.springframework.data.redis.core.Cursor;
importorg.springframework.data.redis.core.RedisTemplate;
importorg.springframework.data.redis.core.ScanOptions;
importorg.springframework.stereotype.Service;

importjava.util.ArrayList;
importjava.util.List;
importjava.util.Map;

@Service
@Slf4j
publicclassRedisServiceImplimplementsRedisService{

@Autowired
RedisTemplateredisTemplate;

@Autowired
LikedServicelikedService;

@Override
publicvoidsaveLiked2Redis(StringlikedUserId,StringlikedPostId){
Stringkey=RedisKeyUtils.getLikedKey(likedUserId,likedPostId);
redisTemplate.opsForHash().put(RedisKeyUtils.MAP_KEY_USER_LIKED,key,LikedStatusEnum.LIKE.getCode());
}

@Override
publicvoidunlikeFromRedis(StringlikedUserId,StringlikedPostId){
Stringkey=RedisKeyUtils.getLikedKey(likedUserId,likedPostId);
redisTemplate.opsForHash().put(RedisKeyUtils.MAP_KEY_USER_LIKED,key,LikedStatusEnum.UNLIKE.getCode());
}

@Override
publicvoiddeleteLikedFromRedis(StringlikedUserId,StringlikedPostId){
Stringkey=RedisKeyUtils.getLikedKey(likedUserId,likedPostId);
redisTemplate.opsForHash().delete(RedisKeyUtils.MAP_KEY_USER_LIKED,key);
}

@Override
publicvoidincrementLikedCount(StringlikedUserId){
redisTemplate.opsForHash().increment(RedisKeyUtils.MAP_KEY_USER_LIKED_COUNT,likedUserId,1);
}

@Override
publicvoiddecrementLikedCount(StringlikedUserId){
redisTemplate.opsForHash().increment(RedisKeyUtils.MAP_KEY_USER_LIKED_COUNT,likedUserId,-1);
}

@Override
publicList<UserLike>getLikedDataFromRedis(){
Cursor<Map.Entry<Object,Object>>cursor=redisTemplate.opsForHash().scan(RedisKeyUtils.MAP_KEY_USER_LIKED,ScanOptions.NONE);
List<UserLike>list=newArrayList<>();
while(cursor.hasNext()){
Map.Entry<Object,Object>entry=cursor.next();
Stringkey=(String)entry.getKey();
//分离出likedUserId,likedPostId
String[]split=key.split("::");
StringlikedUserId=split[0];
StringlikedPostId=split[1];
Integervalue=(Integer)entry.getValue();

//组装成UserLike对象
UserLikeuserLike=newUserLike(likedUserId,likedPostId,value);
list.add(userLike);

//存到list后从Redis中删除
redisTemplate.opsForHash().delete(RedisKeyUtils.MAP_KEY_USER_LIKED,key);
}

returnlist;
}

@Override
publicList<LikedCountDTO>getLikedCountFromRedis(){
Cursor<Map.Entry<Object,Object>>cursor=redisTemplate.opsForHash().scan(RedisKeyUtils.MAP_KEY_USER_LIKED_COUNT,ScanOptions.NONE);
List<LikedCountDTO>list=newArrayList<>();
while(cursor.hasNext()){
Map.Entry<Object,Object>map=cursor.next();
//将点赞数量存储在LikedCountDT
Stringkey=(String)map.getKey();
LikedCountDTOdto=newLikedCountDTO(key,(Integer)map.getValue());
list.add(dto);
//从Redis中删除这条记录
redisTemplate.opsForHash().delete(RedisKeyUtils.MAP_KEY_USER_LIKED_COUNT,key);
}
returnlist;
}
}

③用到的工具类和枚举类

RedisKeyUtils,用于根据一定规则生成 key:

publicclassRedisKeyUtils{

//保存用户点赞数据的key
publicstaticfinalStringMAP_KEY_USER_LIKED="MAP_USER_LIKED";
//保存用户被点赞数量的key
publicstaticfinalStringMAP_KEY_USER_LIKED_COUNT="MAP_USER_LIKED_COUNT";

/**
*拼接被点赞的用户id和点赞的人的id作为key。格式222222::333333
*@paramlikedUserId被点赞的人id
*@paramlikedPostId点赞的人的id
*@return
*/
publicstaticStringgetLikedKey(StringlikedUserId,StringlikedPostId){
StringBuilderbuilder=newStringBuilder();
builder.append(likedUserId);
builder.append("::");
builder.append(likedPostId);
returnbuilder.toString();
}
}

LikedStatusEnum 用户点赞状态的枚举类:

packagecom.solo.coderiver.user.enums;

importlombok.Getter;

/**
*用户点赞的状态
*/
@Getter
publicenumLikedStatusEnum{
LIKE(1,"点赞"),
UNLIKE(0,"取消点赞/未点赞"),
;

privateIntegercode;

privateStringmsg;

LikedStatusEnum(Integercode,Stringmsg){
this.code=code;
this.msg=msg;
}
}

数据库设计

数据库表中至少要包含三个字段:被点赞用户 id,点赞用户 id,点赞状态。再加上主键 id,创建时间,修改时间就行了。

建表语句:

createtable`user_like`(
`id`intnotnullauto_increment,
`liked_user_id`varchar(32)notnullcomment'被点赞的用户id',
`liked_post_id`varchar(32)notnullcomment'点赞的用户id',
`status`tinyint(1)default'1'comment'点赞状态,0取消,1点赞',
`create_time`timestampnotnulldefaultcurrent_timestampcomment'创建时间',
`update_time`timestampnotnulldefaultcurrent_timestamponupdatecurrent_timestampcomment'修改时间',
primarykey(`id`),
INDEX`liked_user_id`(`liked_user_id`),
INDEX`liked_post_id`(`liked_post_id`)
)comment'用户点赞表';

对应的对象 UserLike:

importcom.solo.coderiver.user.enums.LikedStatusEnum;
importlombok.Data;

importjavax.persistence.Entity;
importjavax.persistence.GeneratedValue;
importjavax.persistence.GenerationType;
importjavax.persistence.Id;

/**
*用户点赞表
*/
@Entity
@Data
publicclassUserLike{

//主键id
@Id
@GeneratedValue(strategy=GenerationType.IDENTITY)
privateIntegerid;

//被点赞的用户的id
privateStringlikedUserId;

//点赞的用户的id
privateStringlikedPostId;

//点赞的状态.默认未点赞
privateIntegerstatus=LikedStatusEnum.UNLIKE.getCode();

publicUserLike(){
}

publicUserLike(StringlikedUserId,StringlikedPostId,Integerstatus){
this.likedUserId=likedUserId;
this.likedPostId=likedPostId;
this.status=status;
}
}

数据库操作

操作数据库同样封装在接口中:

①LikedService

importcom.solo.coderiver.user.dataobject.UserLike;
importorg.springframework.data.domain.Page;
importorg.springframework.data.domain.Pageable;

importjava.util.List;

publicinterfaceLikedService{

/**
*保存点赞记录
*@paramuserLike
*@return
*/
UserLikesave(UserLikeuserLike);

/**
*批量保存或修改
*@paramlist
*/
List<UserLike>saveAll(List<UserLike>list);


/**
*根据被点赞人的id查询点赞列表(即查询都谁给这个人点赞过)
*@paramlikedUserId被点赞人的id
*@parampageable
*@return
*/
Page<UserLike>getLikedListByLikedUserId(StringlikedUserId,Pageablepageable);

/**
*根据点赞人的id查询点赞列表(即查询这个人都给谁点赞过)
*@paramlikedPostId
*@parampageable
*@return
*/
Page<UserLike>getLikedListByLikedPostId(StringlikedPostId,Pageablepageable);

/**
*通过被点赞人和点赞人id查询是否存在点赞记录
*@paramlikedUserId
*@paramlikedPostId
*@return
*/
UserLikegetByLikedUserIdAndLikedPostId(StringlikedUserId,StringlikedPostId);

/**
*将Redis里的点赞数据存入数据库中
*/
voidtransLikedFromRedis2DB();

/**
*将Redis中的点赞数量数据存入数据库
*/
voidtransLikedCountFromRedis2DB();

}

②LikedServiceImpl 实现类

importcom.solo.coderiver.user.dataobject.UserInfo;
importcom.solo.coderiver.user.dataobject.UserLike;
importcom.solo.coderiver.user.dto.LikedCountDTO;
importcom.solo.coderiver.user.enums.LikedStatusEnum;
importcom.solo.coderiver.user.repository.UserLikeRepository;
importcom.solo.coderiver.user.service.LikedService;
importcom.solo.coderiver.user.service.RedisService;
importcom.solo.coderiver.user.service.UserService;
importlombok.extern.slf4j.Slf4j;
importorg.springframework.beans.factory.annotation.Autowired;
importorg.springframework.data.domain.Page;
importorg.springframework.data.domain.Pageable;
importorg.springframework.stereotype.Service;
importorg.springframework.transaction.annotation.Transactional;

importjava.util.List;

@Service
@Slf4j
publicclassLikedServiceImplimplementsLikedService{

@Autowired
UserLikeRepositorylikeRepository;

@Autowired
RedisServiceredisService;

@Autowired
UserServiceuserService;

@Override
@Transactional
publicUserLikesave(UserLikeuserLike){
returnlikeRepository.save(userLike);
}

@Override
@Transactional
publicList<UserLike>saveAll(List<UserLike>list){
returnlikeRepository.saveAll(list);
}

@Override
publicPage<UserLike>getLikedListByLikedUserId(StringlikedUserId,Pageablepageable){
returnlikeRepository.findByLikedUserIdAndStatus(likedUserId,LikedStatusEnum.LIKE.getCode(),pageable);
}

@Override
publicPage<UserLike>getLikedListByLikedPostId(StringlikedPostId,Pageablepageable){
returnlikeRepository.findByLikedPostIdAndStatus(likedPostId,LikedStatusEnum.LIKE.getCode(),pageable);
}

@Override
publicUserLikegetByLikedUserIdAndLikedPostId(StringlikedUserId,StringlikedPostId){
returnlikeRepository.findByLikedUserIdAndLikedPostId(likedUserId,likedPostId);
}

@Override
@Transactional
publicvoidtransLikedFromRedis2DB(){
List<UserLike>list=redisService.getLikedDataFromRedis();
for(UserLikelike:list){
UserLikeul=getByLikedUserIdAndLikedPostId(like.getLikedUserId(),like.getLikedPostId());
if(ul==null){
//没有记录,直接存入
save(like);
}else{
//有记录,需要更新
ul.setStatus(like.getStatus());
save(ul);
}
}
}

@Override
@Transactional
publicvoidtransLikedCountFromRedis2DB(){
List<LikedCountDTO>list=redisService.getLikedCountFromRedis();
for(LikedCountDTOdto:list){
UserInfouser=userService.findById(dto.getId());
//点赞数量属于无关紧要的操作,出错无需抛异常
if(user!=null){
IntegerlikeNum=user.getLikeNum()+dto.getCount();
user.setLikeNum(likeNum);
//更新点赞数量
userService.updateInfo(user);
}
}
}
}

数据库的操作就这些,主要还是增删改查。

开启定时任务持久化存储到数据库

定时任务 Quartz 很强大,就用它了。Quartz 使用步骤如下:

①添加依赖

<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-quartz</artifactId>
</dependency>

②编写配置文件

packagecom.solo.coderiver.user.config;

importcom.solo.coderiver.user.task.LikeTask;
importorg.quartz.*;
importorg.springframework.context.annotation.Bean;
importorg.springframework.context.annotation.Configuration;

@Configuration
publicclassQuartzConfig{

privatestaticfinalStringLIKE_TASK_IDENTITY="LikeTaskQuartz";

@Bean
publicJobDetailquartzDetail(){
returnJobBuilder.newJob(LikeTask.class).withIdentity(LIKE_TASK_IDENTITY).storeDurably().build();
}

@Bean
publicTriggerquartzTrigger(){
SimpleScheduleBuilderscheduleBuilder=SimpleScheduleBuilder.simpleSchedule()
//.withIntervalInSeconds(10)//设置时间周期单位秒
.withIntervalInHours(2)//两个小时执行一次
.repeatForever();
returnTriggerBuilder.newTrigger().forJob(quartzDetail())
.withIdentity(LIKE_TASK_IDENTITY)
.withSchedule(scheduleBuilder)
.build();
}
}

③编写执行任务的类继承自 QuartzJobBean

packagecom.solo.coderiver.user.task;

importcom.solo.coderiver.user.service.LikedService;
importlombok.extern.slf4j.Slf4j;
importorg.apache.commons.lang.time.DateUtils;
importorg.quartz.JobExecutionContext;
importorg.quartz.JobExecutionException;
importorg.springframework.beans.factory.annotation.Autowired;
importorg.springframework.scheduling.quartz.QuartzJobBean;

importjava.text.SimpleDateFormat;
importjava.util.Date;

/**
*点赞的定时任务
*/
@Slf4j
publicclassLikeTaskextendsQuartzJobBean{

@Autowired
LikedServicelikedService;

privateSimpleDateFormatsdf=newSimpleDateFormat("yyyy-MM-ddHH:mm:ss");

@Override
protectedvoidexecuteInternal(JobExecutionContextjobExecutionContext)throwsJobExecutionException{

log.info("LikeTask--------{}",sdf.format(newDate()));

//将Redis里的点赞信息同步到数据库里
likedService.transLikedFromRedis2DB();
likedService.transLikedCountFromRedis2DB();
}
}

在定时任务中直接调用 LikedService 封装的方法完成数据同步。

继续浏览有关 Redis 的文章
发表评论