作者@城风 地址:https://juejin.im/post/5ca1b08fe51d455201119177
本项目是和小伙伴开发的一套基于SpringBoot2的社区商城系统。主要是为了方便用户交友的同时拼单购物。本项目目前还属于雏形,但基本的业务已经实现了大概。基于该系统的前端采用Vue构建。同时兼顾Android和小程序端,前端展示正在开发过程中,后续会展出。
一、项目地址
GitHub 地址:https://github.com/fuyunwang/ChengFeng1.5
二、项目的缘由
在当前互联网飞速发展的大潮下,人们的生活也变的更加便捷。本项目就是在这一背景下产生的,为了方便同一个社区下的用户交友、共享动态、获得社区的帮助、了解社区新闻动态的同时享受到购物的便捷。用户可以与同一个社区的用户之间进行拼团购物,既能享受到购物的优惠又能体验到物流的快捷。
三、项目的演进
首先从框架上:
SpringBoot2的诞生已经逐渐成为Java后端研发的主流解决方案,SpringBoot2提供了更多的第三方模块支持、全面基于Java8、基于Servlet3.0,因而具有更好的性能。至于数据访问层,为了更好的控制SQL语句的编写,以及后期针对SQL进行优化我选择了更为灵活小巧的MyBatis。
数据存储上:
核心业务数据,如用户基础信息、社区信息、订单、拼单业务信息等,我这里采用关系型数据库MySQL,Driud数据库连接词监控SQL,从而监控SQL的运行状况找出SQL的优化方案。
首页热点数据,首页热点数据因为需要经常查询而且某些数据是基本不变的,故而针对不变的数据我这里采用SpringCache做缓存,针对经常变的热点数据我存入Redis,如首页物业公告、社区公告、最近新闻等信息,采用Redis的Sorted Set和Hash来存储,进而提高性能。
新闻的具体信息,因为这里我更多的是文章的具体展示,Redis所提供的数据结构以及MySQL关系型的特点对于文章内容的存储都不太友好,因此我这里采用了Mongodb这种文档型数据库存储非结构化数据。
商品信息,为了帮助商家更好的维护商品信息做商品推广,需要收集用户的行为、确定卖点、在用户需要的地方进行广告推荐。这里的功能我采用了ELK技术,在用户添加商品入购物车、下单商品、拼单商品的同时,收集商品的销售情况进行导入ElasticSearch进行数据的分析与聚合。但是因为收集的用户行为信息太单一、更多的用户行为日志如用户在某个页面的停留时长、每个商品的UV与PV等信息还待处理、需要更多的推荐算法来丰富这块内容吧。后期希望可以加上。。。
关于吞吐量方面:
主要是消息队列的应用、分布式锁的应用。为了保证数据库数据的正确性、我们需要在用户进行某些操作之后进行数据状态的同步,简单的更新操作容易造成业务的阻塞、降低并发量,此外过多的事务容易产生更多的数据库级别表锁、行锁,降低数据库的性能我这里采用Redisson来代替事务的使用,在系统启动的过程中、拼单、下单等过程中采用Rabbitmq、Kafka收集数据的流动情况,异步更新。
认证方面:
此系统将用于Android、小程序,前端也将采用Vue,故而这里不再采用传统的Cookie、Session维护用户状态信息。JWT生成Token的方式也算是一个应用多年的行业标准、这里采用与SpringBoot结合更友好的SpringSecurity来进行权限的控制与管理。为了更好的扩展、这里最好还是应该采用RBAC的权限模型。
总结:
该项目属于雏形阶段可以满足常用的业务并发量、更多的应该考虑业务功能的丰富(希望各位能给出建议)、考虑业务的拆分、分布式环境下项目的部署与运行(如分布式一致性、分布式事务)、环境的部署(迁移到Docker、K8S的云环境中)、数据的拆分(分库分表)
四、基本界面展示:
五、接口文档:
文档地址:
https://github.com/fuyunwang/ChengFeng1.5/wiki
例子:
基于Kibana进行简单的数据统计:
六、技术包括
- SpringBoot 2.1.3
- Spring Security JWT
- Spring Boot Cache
- Spring Boot Mail
- MyBatis PageHelper
- MySQL Druid
- Spring Data Mongodb
- Spring Data ElasticSearch
- Redis Redisson
- RabbitMQ
- Kafka
- Memcached
- FastDFS
- Quartz
- Ehcache
- Thymeleaf
- Hibernate Validator
- Guava apache commons jackson joda time
- Swagger
- Tomcat Nginx
- CentOS 7
七、要点
- 基于Redisson构建分布式锁
- 基于RabbitMQ实现延迟消息投递,提高系统的吞吐量
- 数据库层优化:
- 长sql加入ehcache缓存
- 用户认证信息加入memcached缓存
- 采用spring cache缓存热点数据
- 热点数据预加入Redis(如商品的库存信息),采用Redis预减操作,然后采用定时任务同步缓存及数据库
- Kafka收集订单信息,ElasticSearch进行数据分析,产生热卖商品并推荐
写在后面
本项目多处使用Java8提供的新特性。包括lambda表达式、Stream流编程,并结合Guava的工具类库,恩,it is very nice.
自己以前做过一段时间的Android开发,因而对于后台方面完全是初窥门径,开发本系统主要还是希望能够维护一个完整项目的同时学习更多的知识。
自己对于后端的许多技术仍然属于懵懂阶段、对于一些技术的学习还是泛而不精。因此该项目必然存在诸多问题,希望各位不吝赐教。
本项目仍然属于单体架构,后续会推出SpringCloud版本
本项目持续维护,感谢各位提出的issues。
由于能力有限,若有错误或者不当之处,还请大家批评指正,一起学习交流!