求助：如何通过Kibana生成Elastic站内搜索热门关键词时段报表与图表？

一、先确保搜索行为日志已正确存入Elastic #

Kibana无法生成报表的核心原因大概率是没有可分析的搜索行为数据——你当前的Elastic索引只存了Nutch爬取的站内内容，但没记录用户的搜索请求。

• 改造站内搜索服务，将每一次用户搜索的核心字段写入独立的Elastic索引（比如命名为search-logs-YYYY.MM.DD，按天分片），必须包含的字段：

  • keyword：用户输入的搜索关键词，映射设置为text+keyword子字段（用于聚合）
  • @timestamp：搜索发生的时间，类型为date（Kibana时间筛选的核心依赖）
  • 可选字段：hit_count（搜索结果数量）、user_id（用户标识）等

• 示例索引映射（在Elastic Dev Tools执行）：

  PUT /search-logs
  {
    "mappings": {
      "properties": {
        "keyword": {
          "type": "text",
          "fields": {
            "keyword": {
              "type": "keyword",
              "ignore_above": 256
            }
          }
        },
        "@timestamp": {
          "type": "date",
          "format": "yyyy-MM-dd HH:mm:ss||yyyy-MM-dd||epoch_millis"
        },
        "hit_count": {
          "type": "integer"
        }
      }
    },
    "settings": {
      "number_of_shards": 1,
      "number_of_replicas": 0
    }
  }
  

二、Kibana可视化配置步骤 #

1. 创建索引模式 #

• 进入Kibana → Management → Index Patterns
• 输入索引匹配规则search-logs-*，下一步选择@timestamp作为时间字段，完成索引模式创建

2. 生成时段热门关键词图表 #

以**柱状图（按小时展示Top10关键词）**为例：

• 进入Kibana → Visualize Library → 创建新可视化 → 选择「Vertical Bar Chart」
• 数据源选择刚才创建的search-logs-*索引模式
• 配置X轴（时段）：
  点击「Add」→ Buckets → X轴 → 类型选「Date Histogram」→ 字段选@timestamp → 时间间隔选择「Hourly」（按需调整为Daily/Minutely）
• 配置Y轴（关键词热度）：
  点击「Add」→ Buckets → Y轴 → 类型选「Terms」→ 字段选keyword.keyword（必须用keyword子字段，text字段无法聚合）→ 排序方式选「Count」→ 降序 → 设置显示数量为10
• 点击「Update」即可看到按小时聚合的热门关键词柱状图，保存可视化后可添加到Dashboard

3. 其他可选可视化类型 #

• 折线图：展示单个关键词在不同时段的搜索趋势
• 热力图：X轴为时间、Y轴为关键词，单元格颜色对应搜索次数，直观展示时段-关键词的热度分布

三、常见失败原因排查 #

• 「索引模式无法识别」：检查search-logs-*索引是否存在且有数据（Dev Tools执行GET /_cat/indices/search-logs-*），确保@timestamp是date类型
• 「聚合时报错Fielddata disabled」：确认聚合字段用的是keyword.keyword而非keyword（text字段默认禁用fielddata，性能差不建议开启）
• 「时段数据为空」：检查@timestamp的格式是否符合映射要求，比如是否为yyyy-MM-dd HH:mm:ss或ISO8601格式
• 「数据混乱」：确保搜索日志索引和Nutch爬取的内容索引完全分离，不要共用索引

四、优化建议 #

• 用Filebeat/Logstash收集搜索日志：替代代码直接写入，更稳定且支持日志解析、过滤
• 关键词预处理：通过Elastic同义词过滤器合并相似关键词（比如「手机」和「智能手机」），提升报表准确性
• 定时导出报表：Kibana Dashboard支持导出PDF，或用Elastic Alerting功能定时发送报表到指定邮箱

内容的提问来源于stack exchange，提问作者Milos