DOCX《Digital SDP》

Digital SDP V500R005C10 平台中间件维护指导 - Kafka分册 文档版本

01 发布日期 2017-03-20 华为技术有限公司 版权所有 ? 华为技术有限公司 2017.

保留一切权利. 非经本公司书面许可,任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部,并不得以任何形式传播. 商标声明 和其他华为商标均为华为技术有限公司的商标. 本文档提及的其他所有商标或注册商标,由各自的所有人拥有. 注意 您购买的产品、服务或特性等应受华为公司商业合同和条款的约束,本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用范围之内.除非合同另有约定,华为公司对本文档内容不做任何明示或暗示的声明或保证. 由于产品版本升级或其他原因,本文档内容会不定期进行更新.除非另有约定,本文档仅作为使用指导,本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保. 华为技术有限公司 地址: 深圳市龙岗区坂田华为总部办公楼 邮编:518129

网址: http://www.huawei.com 客户服务

邮箱: [email protected] 客户服务

电话:

4008302118 前言概述 Kafka是由LinkedIn开发的一个分布式的消息系统,使用Scala编写;

它以可水平扩展和高吞吐率而被广泛使用;

Apache Kafka与传统消息系统相比,有以下不同: 它被设计为一个分布式系统,易于向外扩展. 它同时为发布和订阅提供高吞吐量. 它支持多订阅者,当失败时能自动平衡消费者. 它将消息持久化到磁盘,可用于批量消费. Digital SDP平台提供的Kafka是在原Kafka开源软件的基础上,提供了部分DFX能力的增强. 本文档提供了Digital SDP平台中间件Kafka的日常运营维护过程中的相关操作指导&

参考信息,用于帮助Digital SDP平台中间件的维护工程师完成日常维护以及常见问题定位. 本文档包含如下内容: 日常维护项 命令参考 日志参考 配置文件参考 FAQ 读者对象 本文档主要适用于以下工程师: 技术支持工程师 维护工程师 符号约定 在本文中可能出现下列标志,它们所代表的含义如下. 符号 说明 用于警示紧急的危险情形,若不避免,将会导致人员死亡或严重的人身伤害. 用于警示潜在的危险情形,若不避免,可能会导致人员死亡或严重的人身伤害. 用于警示潜在的危险情形,若不避免,可能会导致中度或轻微的人身伤害. 用于传递设备或环境安全警示信息,若不避免,可能会导致设备损坏、数据丢失、设备性能降低或其它不可预知的结果. 注意 不涉及人身伤害. 用于突出重要/关键信息、最佳实践和小窍门等. 说明 不是安全警示信息,不涉及人身、设备及环境伤害信息. 修改记录 修改记录累积了每次文档更新的说明.最新版本的文档包含以前所有文档版本的更新内容. 文档版本

01 (2017-03-20) 第一次正式发布. 目录前言 ii

1 日常维护项

1 1.1 检查Kafka运行状态

1 1.2 检查CPU占用情况

2 1.3 检查CPU负载情况

2 1.4 检查Kafka消息消费积压

3 2 命令参考

1 3 日志参考

1 3.1 日志类型

1 3.2 日志文件命名

1 3.3 日志路径

2 3.4 日志样例

2 3.5 如何通过日志定位问题

4 4 配置文件参考

1 4.1 Broker配置文件

1 4.2 日志配置文件

1 5 应急操作

1 5.1 重启应用

1 6 FAQ

1 6.1 server.log文件大小配置

1 6.2 kafka和zk间消息中断,导致启动异常