Search Preview
Ceph:Too Many PGs Per OSD | Ivan的博客
ivanjobs.github.io上次为了研究Ceph块设备文件到底层存储的映射,创建了多个Pool,每个Pool都是150PG,显然超过了mon_pg_warn_max_per_osd的默认值300了。于是ceph -s报了Warning:Too Many PGs Per OSD,这个错误怎么解决呢?搜索一下,一大堆结果,总结下来,就是把这个配置调大就好了。但作为一个一流的软件工程师,怎么可以这么浅尝辄止。
.io > ivanjobs.github.io
SEO audit: Content analysis
Language | Error! No language localisation is found. | ||||||||||||||||||||||||||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
Title | Ceph:Too Many PGs Per OSD | Ivan的博客 | ||||||||||||||||||||||||||||||||||||
Text / HTML ratio | 29 % | ||||||||||||||||||||||||||||||||||||
Frame | Excellent! The website does not use iFrame solutions. | ||||||||||||||||||||||||||||||||||||
Flash | Excellent! The website does not have any flash contents. | ||||||||||||||||||||||||||||||||||||
Keywords cloud | Ceph Mesos Python << PGs mesos OpenStack 笔记 OSD > g_conf>mon_pg_warn_max_per_osd 题解 RGW ssstr num_in CephToo ss v1023 和 ceph | ||||||||||||||||||||||||||||||||||||
Keywords consistency |
|
||||||||||||||||||||||||||||||||||||
Headings |
|
||||||||||||||||||||||||||||||||||||
Images | We found 1 images on this web page. |
SEO Keywords (Single)
Keyword | Occurrence | Density |
---|---|---|
Ceph | 14 | 0.70 % |
Mesos | 7 | 0.35 % |
Python | 7 | 0.35 % |
<< | 5 | 0.25 % |
PGs | 5 | 0.25 % |
mesos | 5 | 0.25 % |
OpenStack | 4 | 0.20 % |
笔记 | 3 | 0.15 % |
OSD | 3 | 0.15 % |
> | 3 | 0.15 % |
g_conf>mon_pg_warn_max_per_osd | 3 | 0.15 % |
题解 | 3 | 0.15 % |
RGW | 2 | 0.10 % |
ssstr | 2 | 0.10 % |
num_in | 2 | 0.10 % |
CephToo | 2 | 0.10 % |
ss | 2 | 0.10 % |
v1023 | 2 | 0.10 % |
和 | 2 | 0.10 % |
ceph | 2 | 0.10 % |
SEO Keywords (Two Word)
Keyword | Occurrence | Density |
---|---|---|
Many PGs | 3 | 0.15 % |
PGs Per | 3 | 0.15 % |
many PGs | 2 | 0.10 % |
PGs per | 2 | 0.10 % |
Ceph RGW | 2 | 0.10 % |
Ceph v1023 | 2 | 0.10 % |
CephToo Many | 2 | 0.10 % |
Per OSD | 2 | 0.10 % |
struct Jenkins' | 1 | 0.05 % |
Rest API | 1 | 0.05 % |
Python Decorator装饰器模式 | 1 | 0.05 % |
PEP8规范笔记 Python | 1 | 0.05 % |
Python PEP8规范笔记 | 1 | 0.05 % |
Ceph集群部署笔记 Python | 1 | 0.05 % |
tcpdump笔记 Ceph集群部署笔记 | 1 | 0.05 % |
身份验证方式S3 tcpdump笔记 | 1 | 0.05 % |
API 身份验证方式S3 | 1 | 0.05 % |
NTP部署笔记 Linux | 1 | 0.05 % |
笔记 libvirt笔记 | 1 | 0.05 % |
Ceph Rest | 1 | 0.05 % |
SEO Keywords (Three Word)
Keyword | Occurrence | Density | Possible Spam |
---|---|---|---|
Many PGs Per | 3 | 0.15 % | No |
many PGs per | 2 | 0.10 % | No |
CephToo Many PGs | 2 | 0.10 % | No |
PGs Per OSD | 2 | 0.10 % | No |
和 oslomessaging Ceph | 1 | 0.05 % | No |
Python Decorator装饰器模式 笔记 | 1 | 0.05 % | No |
笔记 RabbitMQ 和 | 1 | 0.05 % | No |
RabbitMQ 和 oslomessaging | 1 | 0.05 % | No |
OpenStack oslo 概览 | 1 | 0.05 % | No |
libvirt笔记 OpenStack oslo | 1 | 0.05 % | No |
笔记 libvirt笔记 OpenStack | 1 | 0.05 % | No |
Decorator装饰器模式 笔记 libvirt笔记 | 1 | 0.05 % | No |
PEP8规范笔记 Python Decorator装饰器模式 | 1 | 0.05 % | No |
oslomessaging Ceph Rest | 1 | 0.05 % | No |
Python PEP8规范笔记 Python | 1 | 0.05 % | No |
oslo 概览 OpenStack | 1 | 0.05 % | No |
tcpdump笔记 Ceph集群部署笔记 Python | 1 | 0.05 % | No |
身份验证方式S3 tcpdump笔记 Ceph集群部署笔记 | 1 | 0.05 % | No |
API 身份验证方式S3 tcpdump笔记 | 1 | 0.05 % | No |
Rest API 身份验证方式S3 | 1 | 0.05 % | No |
SEO Keywords (Four Word)
Keyword | Occurrence | Density | Possible Spam |
---|---|---|---|
Many PGs Per OSD | 2 | 0.10 % | No |
CephToo Many PGs Per | 2 | 0.10 % | No |
最新文章 dev ops math | 1 | 0.05 % | No |
Decorator装饰器模式 笔记 libvirt笔记 OpenStack | 1 | 0.05 % | No |
OpenStack KeyStone API httplocalhost5000 | 1 | 0.05 % | No |
概览 OpenStack KeyStone API | 1 | 0.05 % | No |
oslo 概览 OpenStack KeyStone | 1 | 0.05 % | No |
OpenStack oslo 概览 OpenStack | 1 | 0.05 % | No |
libvirt笔记 OpenStack oslo 概览 | 1 | 0.05 % | No |
笔记 libvirt笔记 OpenStack oslo | 1 | 0.05 % | No |
Python Decorator装饰器模式 笔记 libvirt笔记 | 1 | 0.05 % | No |
API httplocalhost5000 源码追踪 Python | 1 | 0.05 % | No |
PEP8规范笔记 Python Decorator装饰器模式 笔记 | 1 | 0.05 % | No |
Python PEP8规范笔记 Python Decorator装饰器模式 | 1 | 0.05 % | No |
Ceph集群部署笔记 Python PEP8规范笔记 Python | 1 | 0.05 % | No |
tcpdump笔记 Ceph集群部署笔记 Python PEP8规范笔记 | 1 | 0.05 % | No |
身份验证方式S3 tcpdump笔记 Ceph集群部署笔记 Python | 1 | 0.05 % | No |
API 身份验证方式S3 tcpdump笔记 Ceph集群部署笔记 | 1 | 0.05 % | No |
Rest API 身份验证方式S3 tcpdump笔记 | 1 | 0.05 % | No |
Ceph Rest API 身份验证方式S3 | 1 | 0.05 % | No |
Internal links in - ivanjobs.github.io
开始使用gtest | Ivan的博客
寻找正确的语义[比赛总结] | Ivan的博客
score_thresholder服务开发总结 | Ivan的博客
Debug CPP Program On Ubuntu | Ivan的博客
Modern CPP Developer Need To Know | Ivan的博客
汇编语言学习笔记 | Ivan的博客
Mesos Quota 和 Reservation | Ivan的博客
libprocess学习笔记 | Ivan的博客
Consul使用笔记 | Ivan的博客
SSH重新学习 | Ivan的博客
Protocol buffers 代码入门 | Ivan的博客
Mesos Slave 如何上报资源? | Ivan的博客
Object Locator (Ceph) 探究笔记 | Ivan的博客
librados接口使用 | Ivan的博客
Ceph RGW Pools 浅析 | Ivan的博客
在单机上搭建多Ceph集群 | Ivan的博客
Dockerfile中RUN/CMD/ENTRYPOINT的区分 | Ivan的博客
strace使用入门 | Ivan的博客
Haystack论文学习笔记 | Ivan的博客
Mesos关联配置 | Ivan的博客
ZooKeeper概览 | Ivan的博客
Ceph故障解析-filestore_merge_threshold | Ivan的博客
基于laravel+mysql的容器化DAL方案 | Ivan的博客
vuejs使用小结1 | Ivan的博客
Ceph新技能Get | Ivan的博客
Ceph v10.2.3 RGW源码解析2 | Ivan的博客
Ceph v10.2.3 RGW源码解析1 | Ivan的博客
s3cmd使用说明 | Ivan的博客
vuejs工具链简介 | Ivan的博客
requirejs简介 | Ivan的博客
可编程自动化输入方案(Mac下) | Ivan的博客
Mesos Supress/Revive Offers测试 | Ivan的博客
Mesos Offer生命周期杂记 | Ivan的博客
Mesos Agent Containerizer分析 | Ivan的博客
get started with createjs chapter 1 notes | Ivan的博客
mesos agent /monitor/statistics返回数据业务意义 | Ivan的博客
mesos master/messages_deactivate_frameworks 不生效? | Ivan的博客
KMP算法杂谈 | Ivan的博客
Mesos配置项深入分析 | Ivan的博客
mesos-master replicated_log存的是什么? | Ivan的博客
mesos disk usage vs df 结果不一致问题 | Ivan的博客
Mesos GC原理解析 | Ivan的博客
准备mesos单机版开发测试环境 | Ivan的博客
Mesos 1.0.0 源码解析杂记 | Ivan的博客
stout学习笔记 | Ivan的博客
gflags学习笔记 | Ivan的博客
ceph fuse挂载cephfs, ls不出文件列表问题,调试记录 | Ivan的博客
Ceph源码解析(3)-rados put过程探究 | Ivan的博客
Hub,Bridge,Switch和Gateway是什么? | Ivan的博客
数论学习笔记 | Ivan的博客
二分图专题解析 | Ivan的博客
Ceph Cluster调优日志 | Ivan的博客
boost库的智能指针 | Ivan的博客
Linux命令使用记录 | Ivan的博客
Vim Cheat Sheet | Ivan的博客
原码、反码、补码笔记 | Ivan的博客
ceph-deploy 配置文件比较 BUG | Ivan的博客
Ceph源码解析(2)-rados put过程探究 | Ivan的博客
Ceph Release 概述 | Ivan的博客
Ceph CRUSH Map 维护详解 | Ivan的博客
题解[第二周] | Ivan的博客
MathQuill Math Equation Cheatsheet | Ivan的博客
题解[第一周] | Ivan的博客
Ceph集群运维问题记录 | Ivan的博客
linux man高级技巧 | Ivan的博客
Git 我错了! | Ivan的博客
Ceph源码解析(1)-Create Pool过程探究 | Ivan的博客
准备Ceph开发环境 | Ivan的博客
Ceph:Too Many PGs Per OSD | Ivan的博客
UVA 11292 题解 | Ivan的博客
Ceph RBD 文件映射实验笔记 | Ivan的博客
硬盘分区 | Ivan的博客
硬盘模型 | Ivan的博客
Ceph配置项 | Ivan的博客
OSTEP 文件系统实现 | Ivan的博客
在Ceph底层xfs上找到你上传的文件 | Ivan的博客
使用s3cmd操作ceph rgw | Ivan的博客
Ceph核心概念备忘录 | Ivan的博客
COSBench使用笔记 | Ivan的博客
使用saltstack部署运维ceph集群笔记 | Ivan的博客
如何使用salt states? | Ivan的博客
ceph-deploy命令详解 | Ivan的博客
dd笔记 | Ivan的博客
DTrace是什么? | Ivan的博客
Ceph Cache Tier笔记 | Ivan的博客
Linux下理解filesystem/device/mount等概念 | Ivan的博客
Base64编码详解与应用 | Ivan的博客
URLEncoder学习笔记 | Ivan的博客
Ceph论文阅读笔记 | Ivan的博客
使用Python inotify监控文件变化 | Ivan的博客
Git命令Snippets | Ivan的博客
Ivanjobs.github.io Spined HTML
Ceph:Too Many PGs Per OSD | Ivan的博客 最新文章 dev ops math algorithm personal 开始使用gtest 2018书单课单 2017年总结/2018年展望 寻找正确的语义[比赛总结] score_thresholder服务开发总结 Debug CPP Program On Ubuntu Modern CPP Developer Need To Know 汇编语言学习笔记 Mesos Quota 和 Reservation libprocess学习笔记 Consul使用笔记 SSH重新学习 Protocol buffers 代码入门 Mesos Slave 如何上报资源? Object Locator (Ceph) 探究笔记 librados接口使用 Ceph RGW Pools 浅析 在单机上搭建多Ceph集群 2016年总结/2017年展望 Dockerfile中RUN/CMD/ENTRYPOINT的区分 strace使用入门 Haystack论文学习笔记 Mesos关联配置 ZooKeeper概览 Ceph故障解析-filestore_merge_threshold 基于laravel+mysql的容器化DAL方案 vuejs使用小结1 Ceph新技能Get Ceph v10.2.3 RGW源码解析2 Ceph v10.2.3 RGW源码解析1 s3cmd使用说明 vuejs工具链简介 requirejs简介 mesos maintenance深度解析 可编程自动化输入方案(Mac下) Mesos Supress/Revive Offers测试 Mesos Offer生命周期杂记 MesosWage-earnerContainerizer分析 get started with createjs installment 1 notes mesos wage-earner /monitor/statistics返回数据业务意义 mesos master/messages_deactivate_frameworks 不生效? mesos /flags 403 forbidden? KMP算法杂谈 Mesos配置项深入分析 mesos-master replicated_log存的是什么? mesos disk usage vs df 结果不一致问题 Mesos GC原理解析 准备mesos单机版开发测试环境 Mesos 1.0.0 源码解析杂记 stout学习笔记 gflags学习笔记 ceph fuse挂载cephfs, ls不出文件列表问题,调试记录 Ceph源码解析(3)-rados put过程探究 Hub,Bridge,Switch和Gateway是什么? 数论学习笔记 二分图专题解析 Ceph Cluster调优日志 boost库的智能指针 Linux命令使用记录 Vim Cheat Sheet 原码、反码、补码笔记 ceph-deploy 配置文件比较 BUG Ceph源码解析(2)-rados put过程探究 Ceph Release 概述 Ceph CRUSH Map 维护详解 题解[第二周] MathQuill Math Equation Cheatsheet 题解[第一周] Ceph集群运维问题记录 linux man高级技巧 Git 我错了! Ceph源码解析(1)-Create Pool过程探究 准备Ceph开发环境 Ceph:Too Many PGs Per OSD UVA 11292 题解 Docker Private Registry(Ceph Swift) 搭建笔记 Ceph RBD 文件映射实验笔记 硬盘分区 硬盘模型 Ceph配置项 OSTEP 文件系统实现 在Ceph底层xfs上找到你上传的文件 使用s3cmd操作ceph rgw Ceph核心概念备忘录 COSBench使用笔记 GCJ2015 Qualification Round-B题解 使用saltstack部署运维ceph集群笔记 如何使用salt states? ceph-deploy命令详解 dd笔记 DTrace是什么? Ceph Cache Tier笔记 Linux下理解filesystem/device/mount等概念 Base64编码详解与应用 URLEncoder学习笔记 Ceph论文阅读笔记 使用Python inotify监控文件变化 Git命令Snippets 使用Nginx做LB MathQuill学习笔记 Docker化Laravel开发环境 Ceph Pool PG配置说明 Ceph 笔记 Ceph源码分析 Latex数学符号 为Ceph OSS服务搭建LB Ceph RGW S3接口测试:诡异的403 AccessDenied问题 访问Ceph RGW失败 403 Forbidden问题 解决历程 Ceph RADOS论文研读笔记 Ceph源码分析:从一个REST请求,到OSD存储。 各种开源代码协议简述 OpenStack Projects简述 OpenStack Ceilometer 笔记 RabbitMQ 和 oslo.messaging Ceph Rest API 身份验证方式(S3) tcpdump笔记 Ceph集群部署笔记 Python PEP8规范笔记 Python Decorator(装饰器)模式 笔记 libvirt笔记 OpenStack oslo 概览 OpenStack KeyStone API http://localhost:5000/ 源码追踪 Python pdb笔记 zero length variety in a struct Jenkins' Hash Functions NTP部署笔记 Linux iptables笔记 Python Paste笔记 Python PasteDeploy笔记 Python eventlet笔记 使用curl测试RESTful接口 ubuntu14.04下安装devstack devstack 安装指南【最简单】 Docker操作记录 git merge 详解 Python 包管理详解 阿里云服务器设置swapfile的方法 shell脚本编写向导 搭建Laravel全栈开发环境 2016 May 08 Ceph:Too Many PGs Per OSD 上次为了研究Ceph块设备文件到底层存储的映射,创建了多个Pool,每个Pool都是150PG,显然超过了mon_pg_warn_max_per_osd的默认值300了。于是ceph -s报了Warning:Too Many PGs Per OSD,这个错误怎么解决呢?搜索一下,一大堆结果,总结下来,就是把这个配置调大就好了。但作为一个一流的软件工程师,怎么可以这么浅尝辄止。 mon_pg_warn_max_per_osd 首先,这个配置是什么意思?每个OSD的PG数量可配置?不对。把所有Pool的PG数量求和,除以OSD的个数,就得到平均每个OSD上的PG数量,这个数量默认值是300,如果超过了,MON就会报Warning。证据如下(源码): if (num_in && g_conf->mon_pg_warn_max_per_osd > 0) { int per = sum_pg_up / num_in; if (per > g_conf->mon_pg_warn_max_per_osd) { ostringstream ss; ss << "too many PGs per OSD (" << per << " > max " << g_conf->mon_pg_warn_max_per_osd << ")"; summary.push_back(make_pair(HEALTH_WARN, ss.str())); if (detail) detail->push_back(make_pair(HEALTH_WARN, ss.str())); } } 为什么说,这个配置不能随便配? 这个配置,一定程度上决定了pool pg num的设置。设置的过大或者过小都不可以,如果过大,那么backfill和recovery的时候负载太大,如果过小,数据就没法很好的均匀分布。 参考 解决too many PGs per OSD的问题 pg规划与公式计算 ceph pgcalc Please enable JavaScript to view the comments powered by Disqus. All content is licensed under CC BY-NC-SA Buit with Jekyll and 3-Jekyll theme • Hosted on Github Table of Contents