01-统计分析功能(生成统计数据)
一、数据库设计
1、数据库:statistics_daily
2、数据表
二、创建微服务
1、在service模块下创建子模块service_statistics
2、resources目录下创建文件application.properties
# 服务端口
server.port=8008
# 服务名
spring.application.name=service-statistics
# mysql数据库连接
spring.datasource.driver-class-name=com.mysql.jdbc.Driver
spring.datasource.url=jdbc:mysql://localhost:3306/guli?serverTimezone=GMT%2B8&characterEncoding=utf-8&useSSL=false
spring.datasource.username=root
spring.datasource.password=123456
#返回json的全局时间格式
spring.jackson.date-format=yyyy-MM-dd HH:mm:ss
spring.jackson.time-zone=GMT+8
#配置mapper xml文件的路径
mybatis-plus.mapper-locations=classpath:com/atguigu/staservice/mapper/xml/*.xml
#mybatis日志
mybatis-plus.configuration.log-impl=org.apache.ibatis.logging.stdout.StdOutImpl
# nacos服务地址
spring.cloud.nacos.discovery.server-addr=127.0.0.1:8848
3、MP代码生成器生成代码
4、创建SpringBoot启动类
@SpringBootApplication
@MapperScan("com.atguigu.staservice.mapper")
@ComponentScan("com.atguigu")
@EnableDiscoveryClient //远程调用
@EnableFeignClients
public class StaApplication {
public static void main(String[] args) {
SpringApplication.run(StaApplication.class,args);
}
}
三、实现服务调用
1、在service_ucenter模块创建接口,统计某一天的注册人数
UcenterMemberController
//统计某一天注册人数,生成统计数据
@GetMapping(value = "countregister/{day}")
public R countregister(@PathVariable String day){
Integer count = memberService.registerCount(day);
return R.ok().data("countRegister", count);
}
UcenterMemberService
//统计某一天注册人数,生成统计数据
Integer registerCount(String day);
UcenterMemberServiceImpl
//统计某一天注册人数,生成统计数据
@Override
public Integer registerCount(String day) {
return baseMapper.selectRegisterCount(day);
}
UcenterMemberMapper
//统计某一天注册人数,生成统计数据
Integer selectRegisterCount(String day);
UcenterMemberMapper.xml
<select id="selectRegisterCount" resultType="java.lang.Integer">
SELECT COUNT(*)
FROM ucenter_member uc
WHERE DATE(uc.gmt_create) = #{value}
</select>
#############################mapper配置文件中一个或多个参数##############################
~~~~如UcenterMemberMapper:Integer selectRegisterCount(String day);含有一个参数
则UcenterMemberMapper.xml中:WHERE DATE(uc.gmt_create) = #{value}的 #{}中的值可任意
~~~~如UcenterMemberMapper:Integer selectRegisterCount(String day,String name);含有两个参数
则UcenterMemberMapper.xml中:WHERE DATE(uc.gmt_create) = #{value}的 #{}中的值可通过两种方式获取
方式一:根据参数的位置获取 #{0}表示取第一个参数 #{1}表示取第二个参数
方式二:Integer selectRegisterCount(@Param("aa") String day,String name);在UcenterMemberMapper.xml中通过#{aa}获取。
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
#################################扫描mapper配置文件需要配置两个地方######################
pom文件中添加:
<build>
<resources>
<resource>
<directory>src/main/java</directory>
<includes>
<include>**/*.xml</include>
</includes>
<filtering>false</filtering>
</resource>
</resources>
</build>
resource/application.properties添加:
#配置mapper xml文件的路径
mybatis-plus.mapper-locations=classpath:com/atguigu/staservice/mapper/xml/*.xml
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
2、在service_statistics模块创建远程调用接口
创建client包和UcenterClient接口
@Component
@FeignClient("service-ucenter")
public interface UcenterClient {
@GetMapping(value = "/educenter/member/countregister/{day}")
public R countregister(@PathVariable("day") String day);
}
3、在service_statistics模块调用微服务
StatisticsDailyController
@RestController
@RequestMapping("/staservice/sta")
@CrossOrigin
public class StatisticsDailyController {
@Autowired
private StatisticsDailyService statisticsDailyService;
//统计某一天的注册人数
@PostMapping("createStatisticsByDate/{day}")
public R createStatisticsByDate(@PathVariable String day) {
statisticsDailyService.createStatisticsByDay(day);
return R.ok();
}
}
StatisticsDailyServiceImpl
@Service
public class StatisticsDailyServiceImpl extends ServiceImpl<StatisticsDailyMapper, StatisticsDaily> implements StatisticsDailyService {
@Autowired
private UcenterClient ucenterClient;
//统计某一天的注册人数
@Override
public void createStatisticsByDay(String day) {
//删除已存在的统计对象
QueryWrapper<StatisticsDaily> dayQueryWrapper = new QueryWrapper<>();
dayQueryWrapper.eq("date_calculated", day);
baseMapper.delete(dayQueryWrapper);
//获取统计信息
R r = ucenterClient.countregister(day);
Integer register = (Integer)r.getData().get("countRegister");
Integer loginNum = RandomUtils.nextInt(100, 200);//TODO
Integer videoViewNum = RandomUtils.nextInt(100, 200);//TODO
Integer courseNum = RandomUtils.nextInt(100, 200);//TODO
StatisticsDaily daily = new StatisticsDaily();
daily.setRegisterNum(register);
daily.setDateCalculated(day);
daily.setLoginNum(loginNum);
daily.setVideoViewNum(videoViewNum);
daily.setCourseNum(courseNum);
baseMapper.insert(daily);
}
}
http://localhost:8008/swagger-ui.html
查看数据库:
############################################定时任务#########################################
四、添加定时任务
我们现在使用的是SpringBoot工程,整合定时任务非常方便。
1、在StaApplication启动类上添加注解
@EnableScheduling //开启定时任务
2、创建定时任务类,使用cron表达式来设置什么时候去执行:(1) cron表达式也称为七子表达式(七域表达式):设置执行规则
复制日期工具类。
在service_statistics中创建schedule包下创建ScheduledTask.java
@Component
public class ScheduledTask {
@Autowired
private StatisticsDailyService statisticsDailyService;
// 0/5 * * * * ?表示每隔5秒执行一次这个方法
@Scheduled(cron = "0/5 * * * * ?")
public void task1() {
System.out.println("**************task1执行了..");
}
//在每天凌晨1点,把前一天数据进行数据查询添加
@Scheduled(cron = "0 0 1 * * ?")
public void task2(){
//获取上一天的日期
String date = DateUtil.formatDate(DateUtil.addDays(new Date(), -1));
statisticsDailyService.createStatisticsByDay(date);
}
}
3、在线生成cron表达式
http://cron.qqe2.com/
02-生成统计数据前端整合
一、nginx配置
location ~ /staservice/ {
proxy_pass http://localhost:8008;
}
二、前端页面实现
1、创建api
创建src/api/sta.js
import request from '@/utils/request'
export default {
//1 生成统计数据
createStaData(day) {
return request({
url: '/staservice/sta/createStatisticsByDate/'+day,
method: 'post'
})
}
}
2、增加路由
src/router/index.js
{
path: '/sta',
component: Layout,
redirect: '/sta/create',
name: '统计分析',
meta: { title: '统计分析', icon: 'example' },
children: [
{
path: 'create',
name: '生成数据',
component: () => import('@/views/sta/create'),
meta: { title: '生成数据', icon: 'table' }
},
{
path: 'show',
name: '图表显示',
component: () => import('@/views/sta/show'),
meta: { title: '图表显示', icon: 'tree' }
}
]
},
3、创建组件
src/views/sta/create.vue
模板部分
<template>
<div class="app-container">
<!--表单-->
<el-form :inline="true" class="demo-form-inline">
<el-form-item label="日期">
<el-date-picker
v-model="day"
type="date"
placeholder="选择要统计的日期"
value-format="yyyy-MM-dd" />
</el-form-item>
<el-button
:disabled="btnDisabled"
type="primary"
@click="create()">生成</el-button>
</el-form>
</div>
</template>
script部分
<script>
import sta from '@/api/sta'
export default {
data(){
return {
day:'',
btnDisabled:false
}
},
created() {
},
methods:{
create() {
sta.createStaData(this.day).then(response=>{
//提示信息
this.$message({
type: 'success',
message: '生成数据成功!'
})
//跳转到图表显示页面
this.$router.push({path:'/sta/show'})
})
}
}
}
</script>
生成日期为2019-01-02的统计数据:
查看数据库:
03-统计数据图表显示
一、ECharts
1、简介
ECharts是百度的一个项目,后来百度把Echart捐给apache,用于图表展示,提供了常规的折线图、柱状图、散点图、饼图、K线图,用于统计的盒形图,用于地理数据可视化的地图、热力图、线图,用于关系数据可视化的关系图、treemap、旭日图,多维数据可视化的平行坐标,还有用于 BI 的漏斗图,仪表盘,并且支持图与图之间的混搭。
官方网站:https://echarts.baidu.com/
2、基本使用
入门参考:官网->文档->教程->5分钟上手ECharts
(1)创建html页面:柱图.html
(2)引入ECharts
<!-- 引入 echarts.js -->
<script src="echarts.min.js"></script>
(3)定义图表区域
<!-- 为ECharts准备一个具备大小(宽高)的Dom -->
<div id="main" style="width: 600px;height:400px;"></div>
(4)渲染图表
<script type="text/javascript">
// 基于准备好的dom,初始化echarts实例
var myChart = echarts.init(document.getElementById('main'));
// 指定图表的配置项和数据
var option = {
title: {
text: 'ECharts 入门示例'
},
tooltip: {},
legend: {
data:['销量']
},
xAxis: {
data: ["衬衫","羊毛衫","雪纺衫","裤子","高跟鞋","袜子"]
},
yAxis: {},
series: [{
name: '销量',
type: 'bar',
data: [5, 20, 36, 10, 10, 20]
}]
};
// 使用刚指定的配置项和数据显示图表。
myChart.setOption(option);
</script>
3、折线图
实例参考:官网->实例->官方实例 https://echarts.baidu.com/examples/
折线图.html
<script type="text/javascript">
// 基于准备好的dom,初始化echarts实例
var myChart = echarts.init(document.getElementById('main'));
option = {
xAxis: {
type: 'category',
data: ['Mon', 'Tue', 'Wed', 'Thu', 'Fri', 'Sat', 'Sun']
},
yAxis: {
type: 'value'
},
series: [{
data: [820, 932, 901, 934, 1290, 1330, 1320],
type: 'line'
}]
};
// 使用刚指定的配置项和数据显示图表。
myChart.setOption(option);
</script>
二、项目中集成ECharts
1、安装ECharts
npm install --save echarts@4.1.0
2、增加路由(图表显示/views/sta/show)
3、创建组件 /views/sta/show.vue
模板
<template>
<div class="app-container">
<!--表单-->
<el-form :inline="true" class="demo-form-inline">
<el-form-item>
<el-select v-model="searchObj.type" clearable placeholder="请选择">
<el-option label="学员登录数统计" value="login_num"/>
<el-option label="学员注册数统计" value="register_num"/>
<el-option label="课程播放数统计" value="video_view_num"/>
<el-option label="每日课程数统计" value="course_num"/>
</el-select>
</el-form-item>
<el-form-item>
<el-date-picker
v-model="searchObj.begin"
type="date"
placeholder="选择开始日期"
value-format="yyyy-MM-dd" />
</el-form-item>
<el-form-item>
<el-date-picker
v-model="searchObj.end"
type="date"
placeholder="选择截止日期"
value-format="yyyy-MM-dd" />
</el-form-item>
<el-button
:disabled="btnDisabled"
type="primary"
icon="el-icon-search"
@click="showChart()">查询</el-button>
</el-form>
<div class="chart-container">
<div id="chart" class="chart" style="height:500px;width:100%" />
</div>
</div>
</template>
js:暂时显示临时数据
<script>
import echarts from 'echarts'
export default {
data() {
return {
searchObj:{},
btnDisabled:false
}
},
methods:{
showChart(){
// 基于准备好的dom,初始化echarts实例
this.chart = echarts.init(document.getElementById('chart'))
// console.log(this.chart)
// 指定图表的配置项和数据
var option = {
// x轴是类目轴(离散数据),必须通过data设置类目数据
xAxis: {
type: 'category',
data: ['Mon', 'Tue', 'Wed', 'Thu', 'Fri', 'Sat', 'Sun']
},
// y轴是数据轴(连续数据)
yAxis: {
type: 'value'
},
// 系列列表。每个系列通过 type 决定自己的图表类型
series: [{
// 系列中的数据内容数组
data: [820, 932, 901, 934, 1290, 1330, 1320],
// 折线图
type: 'line'
}]
}
this.chart.setOption(option)
}
}
}
</script>
三、完成后端业务
1、StatisticsDailyController
//图表显示,返回两部分数据,日期json数组,数量json数组
@GetMapping("showData/{type}/{begin}/{end}")
public R showData(@PathVariable String type,@PathVariable String begin,
@PathVariable String end){
Map<String,Object> map = statisticsDailyService.getShowData(type,begin,end);
return R.ok().data(map);
}
2、service
接口:
//图表显示,返回两部分数据,日期json数组,数量json数组
Map<String, Object> getShowData(String type, String begin, String end);
实现:
wrapper.select("date_calculated",type);
//图表显示,返回两部分数据,日期json数组,数量json数组
@Override
public Map<String, Object> getShowData(String type, String begin, String end) {
//根据条件查询对应数据
QueryWrapper<StatisticsDaily> wrapper = new QueryWrapper<>();
wrapper.between("date_calculated",begin,end);
wrapper.select("date_calculated",type);
List<StatisticsDaily> staList = baseMapper.selectList(wrapper);
//因为返回有两部分数据:日期 和 日期对应数量
//前端要求数组json结构,对应后端java代码是list集合
//创建两个list集合,一个日期list,一个数量list
List<String> date_calculatedList = new ArrayList<>();
List<Integer> numDataList = new ArrayList<>();
for (int i = 0; i < staList.size(); i++) {
StatisticsDaily daily = staList.get(i);
//封装日期list集合
date_calculatedList.add(daily.getDateCalculated());
//封装对应数量
switch (type) {
case "login_num":
numDataList.add(daily.getLoginNum());
break;
case "register_num":
numDataList.add(daily.getRegisterNum());
break;
case "video_view_num":
numDataList.add(daily.getVideoViewNum());
break;
case "course_num":
numDataList.add(daily.getCourseNum());
break;
default:
break;
}
}
//把封装之后两个list集合放到map集合,进行返回
Map<String, Object> map = new HashMap<>();
map.put("date_calculatedList",date_calculatedList);
map.put("numDataList",numDataList);
return map;
}
四、前后端整合
1、创建api
src/api/sta.js中添加方法
//2 获取统计数据
getDataSta(searchObj) {
return request({
url: `/staservice/sta/showData/${searchObj.type}/${searchObj.begin}/${searchObj.end}`,
method: 'get'
})
}
2、show.vue中引入api模块、修改方法、修改options中的数据
<script>
import echarts from 'echarts'
import staApi from '@/api/sta'
export default {
data() {
return {
searchObj:{},
btnDisabled:false,
xData:[],
yData:[]
}
},
methods:{
showChart(){
staApi.getDataSta(this.searchObj).then(response=>{
console.log('*****************'+response)
this.yData = response.data.numDataList //日期
this.xData = response.data.date_calculatedList //值
//调用下面生成图表的方法,改变值
this.setChart()
})
},
setChart(){
// 基于准备好的dom,初始化echarts实例
this.chart = echarts.init(document.getElementById('chart'))
// console.log(this.chart)
// 指定图表的配置项和数据
var option = {
// x轴是类目轴(离散数据),必须通过data设置类目数据
xAxis: {
type: 'category',
data: this.xData
},
// y轴是数据轴(连续数据)
yAxis: {
type: 'value'
},
// 系列列表。每个系列通过 type 决定自己的图表类型
series: [{
// 系列中的数据内容数组
data: this.yData,
// 折线图
type: 'line'
}]
}
this.chart.setOption(option)
}
}
}
</script>
五、样式调整
参考配置手册:https://echarts.baidu.com/option.html#title
1、显示标题
title: {
text: '数据统计'
},
2、x坐标轴触发提示
tooltip: {
trigger: 'axis'
},
3、区域缩放
dataZoom: [{
show: true,
height: 30,
xAxisIndex: [
0
],
bottom: 30,
start: 10,
end: 80,
handleIcon: 'path://M306.1,413c0,2.2-1.8,4-4,4h-59.8c-2.2,0-4-1.8-4-4V200.8c0-2.2,1.8-4,4-4h59.8c2.2,0,4,1.8,4,4V413z',
handleSize: '110%',
handleStyle: {
color: '#d3dee5'
},
textStyle: {
color: '#fff'
},
borderColor: '#90979c'
},
{
type: 'inside',
show: true,
height: 15,
start: 1,
end: 35
}],
添加在option中:
测试:
网友评论