此页面为机器翻译。请阅读英文原文。 English

多台服务器 尽在一个控制台

HQCenter 是部署在客户现场的一台 Linux 服务器。客户的所有 agent 都连接到它。agent 将数据发送到那里,并从那里获取设置、命令、许可证和新版本。管理员在 HQ Monitor 中查看整个服务器集群,并通过浏览器进行管理。

  • 0 个用于与中心通信的入站端口
  • mTLS 为每个 agent 颁发证书
  • 3 分钟 数据到达中心
  • 约 1 分钟 设置到达 agent
  • 支持回滚 的 agent 和中心更新

设置编辑器 · 立即运行 · 投递状态

来自中心的设置

中心保存每个 agent 设置的副本。管理员在与 agent 本地相同的编辑器中修改作业和设置,然后点击 保存并发送到 agent。agent 大约在一分钟内获取变更。

agent 不会用新设置覆盖正在使用的设置。它会先检查候选设置。不良的候选设置会被搁置,正在使用的设置保持不变,控制台会显示拒绝原因。

投递状态:SENT(在中心)、TAKEN,然后是 APPLIED、ALREADY SET、RESTART NEEDED 或 REJECTED;SUPERSEDED 和 DRIFT
    日志时间为示例。SENT 表示:变更在中心等待,agent 尚未获取。如果 agent 在 10 分钟(默认值)内未对变更做出任何回应,则会出现 DRIFT。英文界面使用以下标签:SENT、TAKEN、APPLIED、ALREADY SET、RESTART NEEDED、REJECTED、SUPERSEDED、DRIFT。

    服务器页面上的状态

    对于每台服务器,您可以看到最后一次变更的进展:状态图标、发送时间(push)和 agent 回复时间(ack)。图标上的提示会显示 agent 拒绝的原因和确切时间。

    一分钟内您就能看到哪些服务器接受了新的备份作业,哪些没有接受,以及原因。

    列表中的服务器级别是 agent 对整台服务器的判定。图标下方有一行显示主要发现。仅当 agent 自身的状态比服务器状态更差时,才会单独显示“Agent”图标。

    超过 30 分钟没有数据的服务器会显示灰色的“自……起无数据”图标,并移到列表末尾。列表上方的汇总行按级别统计服务器数量。

    下发状态。英文界面。APPLIED:代理已应用更改;REJECTED:代理拒绝,原因见提示。
    居中模式的编辑器。代理设置的副本。可保存草稿,或立即发送给代理。
    远程查看代理工作。活动选项卡:每个任务运行了多少次,以及占用了多少时间、CPU 和内存。

    代理保护服务器

    代理会监控自身的内存和 CPU。如果某个代理任务占用过多,代理会暂停该任务,并停止占用内存的运行。它不会影响备份和数据上传。如果代理内存仍在增长,代理会自行重启。被代理关闭的任务会显示在健康报告和编辑器中;点击一个按钮即可重新开启。

    从中心立即运行

    你可以立即启动备份、恢复、sweep、gfix 检查或索引重算,无需等待计划时间。请求走同一条路径:先进入 goafts,然后代理在轮询时获取它并放入自己的队列,经过常规检查。

    待处理已送达已排队等待中运行中已完成失败已拒绝已过期已取消
    • 草稿在控制台中保存更改,稍后发送。你可以看到状态:未发送、已发送、已应用、已被取代。
    • 密码对中心隐藏控制台使用代理公钥加密新密码。只有其所在服务器上的代理才能解密。
    • 设置副本每次替换前,代理会保存一份副本:保留最近 10 份,至少 14 天。被拒绝的候选设置保留 90 天。
    • 仅限服务器本地发布签名检查、许可证、远程命令、程序路径和控制台登录无法从中心更改。
    • 替换数据库需要双方确认替换工作数据库的远程恢复只有在服务器本身允许且用户拥有单独权限时才会运行。开始前,你必须输入数据库文件名。
    • 从中心下发 databases.conf你可以将文件发送给一个代理。goafts 只负责传递;代理会检查并写入文件,并将旧文件保留在旁边。

    签名 · 回滚点 · 检查

    带回滚的更新

    代理从 HQCenter 获取新版本,而不是从互联网。代理会自行更新、HQ Monitor、集群程序和 Firebird。每次更新都遵循同一方案:检查签名、保存回滚点、安装、检查是否正常工作。如果不工作,则回退到旧版本。

    1. 1签名由 IBSurgeon 签名的发布版本
    2. 2回滚点当前版本的副本
    3. 3安装替换文件
    4. 4检查新版本报告“我正在工作”并运行 45 秒
    5. 5完成新版本正常工作
    1. ↺回滚从回滚点恢复副本
    2. ✓旧版本正常工作回滚 2 次后该版本被阻止
    此版本的回滚次数:0 / 2
    点击“开始更新”。
    更新内容时机保护措施
    代理当设置轮询的回复报告有新版本时立即更新,之后每小时一次;若无此类回复,则每 180 秒一次签名、2 个回滚点。新版本必须报告“我正在工作”并运行 45 秒。回滚 2 次后该版本被阻止。
    HQ Monitor设置轮询正常工作时每小时一次;否则每 180 秒一次控制台健康检查 30 秒,保留旧版本副本。
    集群程序每 180 秒检查一次先副本,后主节点。
    Firebird仅在时间窗口内,默认 03:30–04:00等待备份完成。安装后检查,失败则回滚。已回滚的构建不会再次安装。
    HQCenter每 15 分钟一次,前提是 IBSurgeon 为此中心开启了更新;在 IBSurgeon 设定的时间窗口内,例如 02:00–05:00默认关闭。中心所有者可以禁止更新:STACK_UPDATE=off。先检查堆栈签名,然后检查服务最多 5 分钟。如果服务失败,则从缓存安装之前的堆栈。
    • 先测试,再全面推广IBSurgeon 先将发布版本发布到测试区,检查通过后再发布到生产区。HQCenter 每小时复制其所在区域的发布版本一次。
    • 签名检查两次中心在下载前检查签名,并在写入的字节上再次检查。代理在安装前再检查一次。
    • 无法降级除非服务器本身允许,否则无法安装低于当前版本的版本。
    • 在 Linux 上,root 会更改文件代理服务不以 root 身份运行,无法替换受信任的安装文件。

    状态监控 · 电子邮件 · webhook

    问题邮件和每周报告

    HQCenter 读取每个代理的健康快照。新出现的问题,或变得更严重的问题,都是一个事件。中心本身负责发送电子邮件或 webhook。每周一次,中心会为整个集群生成一份报告。

    中心本身不会更改任何内容。如果某个问题持续数周,而这对该服务器来说是正常的,中心会建议一个新的阈值。只有人才能应用它。

    1. 1读取状态每 2 分钟一次,前提是代理文件已更改
    2. 2事件新增、恶化、消失、恢复
    3. 3电子邮件或 webhook;24 小时内不重复
    4. 4每周报告默认周一 07:00
    5. 5✓ 建议新阈值;由管理员应用
    报告

    整个集群 14 天的情况

    对每台服务器:无问题时间占比、每周事件次数,以及哪些发现处于“卡住”状态。

    卡住的发现

    不是噪音,而是正常现象

    至少一半时间处于活动状态,且连续至少一周。例如,服务器 CPU 始终接近阈值。

    建议

    基于真实数据的阈值

    略高于服务器实际表现:比最大值高四分之一。对于较低的阈值,例如可用空间,则比最小值低五分之一。你可以在批准前更改它;有效期为 30 天。

    • 一台主机,一封邮件如果一台主机运行多个代理,主机 CPU、内存或磁盘问题只计一次。
    • 消失或隐藏事件会说明问题为何消失:已修复、被管理员确认,或变为信息。
    • 批准即新的设置版本阈值以管理员名义通过正常下发方式发送给代理。每次批准和拒绝都会记录在审计日志中。
    • 邮件中的链接邮件会注明主机名,给出提示以及指向 HQ Monitor 中该服务器的链接。

    中心管理员负责开启电子邮件和 webhook。在设置完成之前,不会发送任何邮件。事件和报告可在中心面板及其 API 中查看。

    用户 · 权限 · 审计 · 语言

    用户与权限

    每个用户只能看到自己的服务器。更改权限需单独逐项授予。

    管理员可以看到所有服务器并管理用户。普通用户只能看到其列表中的服务器。新的权限或新的列表会在下次页面加载时生效;新密码会使该用户从所有浏览器中退出登录。

    新用户。类型、三项权限和服务器列表。
    权限允许的操作
    发送设置通过中心将更改后的设置发送给代理。
    运行作业启动和取消备份、恢复、sweep 或索引重算(立即运行)。
    替换数据库的作业启动会替换工作数据库的恢复操作。仅可与运行权限一起使用,且仅在代理也允许的情况下。
    • 审计日志每次保存、发送、密码更改和作业启动都会连同用户登录名一起记录。在 goafts 中,哈希链保护日志。
    • 代理请求日志代理本身会为每个更改服务器的请求和每次访问拒绝写一行记录:Local API、来自中心的命令、立即运行、设置更改、更新。密码和请求正文不会写入日志。该文件会连同日志一起发送到中心。
    • HQ Monitor 登录会话持续 7 天。15 分钟内来自同一地址的登录尝试不超过 8 次。
    • 中心管理面板单独的登录,仅限使用管理员证书。会话持续 8 小时。15 分钟内 5 次失败尝试后,登录将关闭 15 分钟。
    • 最多 2000 个用户每个用户都有自己的密码和服务器列表;分配服务器时可按服务器搜索。
    • 5 种界面语言英语、俄语、德语、葡萄牙语(巴西)、西班牙语。统计报告也使用所选语言。

    ← 返回 HQbird 2027 概览 · 一分钟了解服务器健康 →