本文档采用单机部署,分析数据则采用共享目录的方式进行,其中8090端口iServer为主节点
• 单机部署
1. 启动2个iServer,端口分别为8090(默认),8091,关闭端口分别为8015(默认),8016
(修改端口在iServer安装目录下/conf/server.xml,修改8090启动端口,8015关闭端口)
2. 准备一份需要分析的数据,可以参考产品包中自带的范例
(范例数据iServer安装目录下/samples/data/ProcessingData)
1. 主节点(8090)开启Spark集群,自身加入集群并开启分布式服务
2. 子节点(8091)加入主节点Spark集群
3. 所有节点拷贝数据(单机部署数据仅存放主节点即可)
4. 主节点使用分布式分析服务进行分析
1. 启动主节点iServer,开启集群。
2. 启动主节点iServer,在iServer中通过集群-》加入集群-》添加报告器并保存的方式加入集群,服务地址使用主节点的ip和端口,如:http://192.168.15.136:8090/iserver/services/cluster。
3. 开启分布式分析服务。
4. 访问http://IP:8080/ 查看Spark集群节点情况,当前状态下有一个节点。
5. 主节点iServer注册数据
![[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-WgP63lF4-1575251945613)(http://owdkmc7i2.bkt.clouddn.com/9.png)]](https://img-blog.csdnimg.cn/20191202102511662.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3N1cGVybWFwc3VwcG9ydA==,size_16,color_FFFFFF,t_70)
注意:如下图所示,当看到有?号时,需要指定CSV的XY列
6. 启动子节点iServer,通过集群-》加入集群-》添加报告器填写主节点ip地址,保存加入集群
7. 子节点数据拷贝(由于是单机部署数据路径相同,这一步可略过,若是多机集群,则需将数据拷贝到每个子节点,且数据存放路径需与主节点一致)。
8. 访问http://IP:8080/ 查看Spark集群节点情况,当前状态下有两个节点。
9.访问主节点iServer 进入大数据分析页面(http://IP:8090/iserver/services)
![[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-rTTTFqfJ-1575251945614)(http://owdkmc7i2.bkt.clouddn.com/14.png)]](https://img-blog.csdnimg.cn/2019120210135715.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3N1cGVybWFwc3VwcG9ydA==,size_16,color_FFFFFF,t_70)
一直往里面点,当看到如下界面时,可以看到当前版本所支持的大数据分析操作!
9. 此次我们使用aggregatePoints(点聚合分析)功能,填写相关参数
最终会弹出如下分析成功页面,点击使用JS方式浏览,即可可视化查看分析结果内容
1. 多节点分析,需将数据拷贝到每个子节点,且数据存放路径与主节点一致。
2. 分析时,可以查看8080端口查看Spark集群情况,当任务写到Completed时,表明执行成功。
3. 创建分析任务选项卡如果为灰色,则表明未登录或登陆超时失效,需要重新登陆。
4. 如果运行时间过长,可以查看http://IP:4040/地址查看当前执行进度
![[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-SzaDqDJG-1575251945616)(http://owdkmc7i2.bkt.clouddn.com/运行时.png)]](https://img-blog.csdnimg.cn/20191202104631719.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3N1cGVybWFwc3VwcG9ydA==,size_16,color_FFFFFF,t_70)
网友评论