Format de métrique Bencher (BMF)

Les adaptateurs de harnais de benchmark intégrés convertissent la sortie de benchmark en format JSON de métriques Bencher (BMF). Les harnais de benchmarking personnalisés devraient produire leurs résultats en JSON BMF et utiliser l’adaptateur json. Consultez comment suivre des benchmarks personnalisés pour un aperçu complet.

Exemple de format de métrique Bencher (BMF) JSON

{
  "benchmark_name": {
    "latency": {
      "value": 88.0,
      "lower_value": 87.42,
      "upper_value": 88.88
    },
    "throughput": {
      "value": 5.55,
      "lower_value": 3.14,
      "upper_value": 6.30
    }
  },
  "/bin/sh -c ./my_build_script.sh": {
    "build-time": {
      "value": 87.0
    }
  },
  "my_binary": {
    "file-size": {
      "value": 42.0
    }
  }
}

Dans cet exemple, il y a trois Benchmarks:

• benchmark_name Benchmark avec deux Mesures :
  • Latence (latency)
  • Débit (throughput)
• /bin/sh -c ./my_build_script.sh Benchmark avec une Mesure pour suivre le temps de construction (build-time)
• my_binary Benchmark avec une Mesure pour suivre la taille du fichier (file-size)

Ordre de priorité

L’ordre de priorité pour identifier un Benchmark est le suivant :

1. UUID
2. Nom en kebab-case name avec le suffixe -bencher-ignore qui est supprimé pour suppression des alertes (longueur maximale 1024 caractères)
3. slug (longueur maximale 64 caractères)
4. name (longueur maximale 1024 caractères)

L’ordre de priorité pour identifier une Mesure est le suivant :

1. UUID
2. slug (longueur maximale 64 caractères)
3. name (longueur maximale 64 caractères)

Schéma JSON de Bencher Metric Format (BMF)

Il s’agit du schéma JSON pour le Bencher Metric Format (BMF) au format JSON :

{
  "$id": "https://bencher.dev/bmf.json",
  "$schema": "http://json-schema.org/draft-07/schema",
  "type": "object",
  "patternProperties": {
    ".+": {
      "type": "object",
      "patternProperties": {
        ".+": {
          "type": "object",
          "properties": {
            "value": {
              "type": "number"
            },
            "lower_value": {
              "type": "number"
            },
            "upper_value": {
              "type": "number"
            }
          },
          "required": ["value"]
        }
      }
    }
  }
}

Versions du schéma :

• Dernière version : https://bencher.dev/bmf.json
• v0 (dernière) : https://bencher.dev/v0/bmf.json