寻求支持access.log中POST日志重放的压力测试工具及性能可视化方案（JMeter(v5.4.1) Access Log Sampler不支持request_body）

我刚好处理过类似的需求，给你几个靠谱的选项，既能重放带请求体的POST日志，又能生成直观的性能图表和指标：

1. Gatling（优先推荐） #

Gatling本身对日志重放的支持很友好，自带的仪表盘完全能满足性能指标和图表需求，重点是它可以完美处理POST请求的request_body。

实现步骤： #

• 先通过自定义脚本读取access.log，用正则或者日志解析库提取POST请求的关键信息：请求路径、请求体、请求头、参数等。
• 用Gatling的HttpRequestBuilder构建请求，把提取到的request_body填充进去。
• 运行测试后，Gatling会自动生成包含响应时间分布、吞吐量、错误率、百分位指标等的可视化报告，图表和数值都很清晰。

举个简单的脚本片段思路：

import io.gatling.core.Predef._
import io.gatling.http.Predef._
import scala.io.Source

val postRequests = Source.fromFile("access.log").getLines()
  .filter(_.contains("POST"))
  .map(line => {
    // 解析日志行，提取path和body，这里根据你的access.log格式调整逻辑
    val parts = line.split("\"")
    val path = parts(1).split(" ")(1)
    val body = parts(7) // 假设body在这个位置，需匹配实际日志格式
    (path, body)
  }).toList

val scn = scenario("Access Log POST Replay")
  .feed(postRequests)
  .exec(http("POST Request")
    .post("${_1}")
    .body(StringBody("${_2}"))
    .header("Content-Type", "application/x-www-form-urlencoded"))

setUp(scn.inject(atOnceUsers(10))).protocols(http.baseUrl("http://your-target-server"))

2. Locust #

Locust是基于Python的性能测试工具，灵活性拉满，虽然没有直接的日志重放插件，但自己写脚本解析日志非常容易，而且它的Web UI能实时展示性能图表，测试结束后也能生成详细的指标报告。

实现步骤： #

• 用Python的apache-log-parser库或者正则表达式，读取access.log筛选出所有POST请求，提取request_body、请求路径等信息。
• 在Locust的任务函数里循环发送这些POST请求。
• 启动Locust的Web UI后，你可以实时看到TPS、平均响应时间、错误率等数据，测试结束后能导出包含详细指标的HTML报告。

示例脚本片段：

from locust import HttpUser, task, between
import apache_log_parser

# 匹配你的access.log格式，需根据实际日志调整
line_parser = apache_log_parser.make_parser("%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\" \"%{RequestBody}i\"")

class LogReplayUser(HttpUser):
    wait_time = between(0.1, 0.5)
    post_requests = []

    def on_start(self):
        with open("access.log", "r") as f:
            for line in f:
                log_data = line_parser(line)
                if log_data['request_method'] == 'POST':
                    self.post_requests.append({
                        "path": log_data['request_url'],
                        "body": log_data['request_body']
                    })

    @task
    def replay_post(self):
        for req in self.post_requests:
            self.client.post(req["path"], data=req["body"])

3. JMeter 改进方案（适合已有JMeter使用经验的你） #

既然你已经试过JMeter的Access Log Sampler，那可以换个思路，用CSV配合HTTP Request Sampler来实现，同样能满足需求，而且JMeter的Dashboard也能生成性能图表和指标。

实现步骤： #

1. 预处理access.log生成CSV：
   写个简单的Python脚本，把access.log里的POST请求提取出来，将请求路径、request_body、Content-Type等字段保存成CSV文件。比如：

   import re
   import csv
   
   # 根据你的access.log格式调整正则表达式
   log_regex = re.compile(r'(\S+) (\S+) (\S+) \[([^\]]+)\] "POST (\S+) HTTP/\d\.\d" (\d+) (\d+) "([^"]+)" "([^"]+)" "(.*)"')
   
   with open("access.log", "r") as log_file, open("post_requests.csv", "w", newline="") as csv_file:
       writer = csv.writer(csv_file)
       writer.writerow(["path", "body", "content_type"])
       for line in log_file:
           match = log_regex.match(line)
           if match:
               path = match.group(5)
               body = match.group(10)
               content_type = "application/x-www-form-urlencoded"  # 根据实际请求调整
               writer.writerow([path, body, content_type])
   

2. JMeter配置：

   • 添加CSV Data Set Config，指向生成的post_requests.csv，设置变量名比如path、body、content_type。
   • 添加HTTP Request Sampler，设置请求方法为POST，路径填${path}，在"Body Data"里填${body}，然后添加HTTP Header Manager，设置Content-Type为${content_type}。
   • 运行测试后，通过JMeter的Generate Dashboard功能生成包含响应时间、吞吐量、错误率等指标的可视化报告。

总结 #

• 如果追求性能和美观的报告，选Gatling；
• 如果喜欢用Python写灵活的脚本，选Locust；
• 如果已经熟悉JMeter，不想换工具，就用JMeter的CSV方案，学习成本最低。

内容的提问来源于stack exchange，提问作者GRu. L