美文网首页运维行业的易筋经
运维内功——大数据运维篇

运维内功——大数据运维篇

作者: 大白菜的猪猪 | 来源:发表于2020-02-05 14:25 被阅读0次

1.任何数据删除都要默认进入回收站,切记不要贪一时之快直接删除跳过回收站。

2.所有配置里的秘钥都需进行加密存储,时刻关注整个系统的安全。

3.轻量级非数据服务要有机房间切换的能力,加快恢复速度。

4.大规模和小规模场景不是量的变化,是质的差异。

5.实时计算链路长,延时敏感,要有各阶段的详细监控指标来反映问题,方便问题定位。

6.提供客户自助排查作业和重启等基础运维能力。

7.出问题的第一时间需要通知客户,否则客户的各种询问会让你痛不欲生!!!

8.存储瓶颈除了容量,文件数也是个大问题。

9.大规模计算平台至少要能容忍单机故障,存在单点故障的系统切记不能上线!!!

10.离在线混合部署是一个节约的好思路。

11.hdd&sdd混合存储提升shuffle性能。

12.规模大、压力大、要时刻关注硬件和网络发展,尽快拿到尽可能多的科技红利!

相关文章

  • 运维内功——大数据运维篇

    1.任何数据删除都要默认进入回收站,切记不要贪一时之快直接删除跳过回收站。 2.所有配置里的秘钥都需进行加密存储,...

  • 运维内功——MySQL运维篇

    牢记心法准则,让你告别从删库到跑路!!! 1.做好备份是基础,还需要经常性的做回复测试,检查数据的有效性; 2.管...

  • 运维内功——安全运维篇

    运维的核心目的之一就是为了确保服务和系统的安全! 1.尽可能的减少进程的启动权限,尽量不要使用root账号对进程进...

  • 运维内功——日常运维篇

    以下为日常运维时每一个运维人员的内心准则! 1.当发现故障的时候,应该先恢复再排查,实在无计可施可以试试重启; 2...

  • 教你制作最强运维监控大屏

    IT新一代运维大屏,数据驱动运维智能化 重新定义,运维监控平台 运维数据融合集成,构建最强运维平台 用户知识图谱化...

  • Linux运维发展与学习路线笔记

    1.云计算运维、大数据运维、运维开发、应用运维、系统运维架构师、Linux系统运维。 2.20-35K:两年以上L...

  • 运维内功——自动化运维篇

    目前整个运维的发展趋势肯定是朝着自动化运维的方向进行发展的,所以了解自动化运维的处理规则,可以让你在今后的学习发展...

  • 01_1_Linux云计算岗位的发展前景

    Linux运维岗位:Linux系统运维工程师、应用运维工程师、运维开发工程师、云计算运维工程师、大数据运维工程师、...

  • 运维内功——网络篇

    网络是每个系统都需要接触到的部分,网络维护也是运维不可缺失的一部分! 1.生产网络的变更切记三思而后行,一个回车敲...

  • 运维内功——存储篇

    1.数据的安全是底线,即使不服务也不能够造成数据的丢失; 2.在进行多份数据变更之前,先变更单份数据节点; 3.变...

网友评论

    本文标题:运维内功——大数据运维篇

    本文链接:https://www.haomeiwen.com/subject/xddsxhtx.html