Arhn - архитектура программирования

Как удалить повторяющиеся строки и агрегировать соответствующие значения

У меня есть CSV со значениями, разделенными запятыми, в результате использования JMeter CMDRunner.jar для теста производительности, обеспечивающего задержку/запрос в течение определенного периода времени.

2017/02/03 11:15:41.593,15,End-to-end request-response,15
2017/02/03 11:15:41.609,6,Request body is proxied successfully to the backend,6
2017/02/03 11:15:41.616,5,x-junction-path validator,5
2017/02/03 11:15:41.622,9,Invalid content type sent by client ,9
2017/02/03 11:15:41.634,3,Invalid content type requested by client ,3
2017/02/03 11:15:42.595,10,End-to-end request-response,10
2017/02/03 11:15:42.606,10,Request body is proxied successfully to the backend,10
2017/02/03 11:15:42.616,9,x-junction-path validator,9
2017/02/03 11:15:42.625,8,Invalid content type sent by client ,8
2017/02/03 11:15:42.635,5,Invalid content type requested by client ,4
2017/02/03 11:15:43.599,3,End-to-end request-response,3
2017/02/03 11:15:43.603,6,Request body is proxied successfully to the backend,6
2017/02/03 11:15:43.609,7,x-junction-path validator,7
2017/02/03 11:15:43.617,4,Invalid content type sent by client ,4
2017/02/03 11:15:43.622,7,Invalid content type requested by client ,7

Я хотел бы агрегировать задержки на запрос, что означает одну запись на запрос и соответствующие совокупные задержки, т.е. 3-й и 4-й столбцы соответственно. Есть ли плагин jmeter для получения этого результата или как я могу сделать это в BASH?

Ожидаемый результат (например.):

Примечание. Поскольку это совокупность, отметка времени и прошедшее время (2-й столбец) не имеют значения.

End-to-end request-response,12.31
equest body is proxied successfully to the backend,6.1
x-junction-path validator,5.0
Invalid content type sent by client, 3.12
Invalid content type requested by client ,3.01
bash shell
03.02.2017

  • Предоставьте текстовое представление изображения, скопируйте и вставьте его из консоли. чтобы мы могли протестировать. Также предоставьте ожидаемый результат для того же 03.02.2017
  • Каков ваш точный ожидаемый результат для вышеуказанного ввода? 03.02.2017
  • Привет, я обновил описание с текстовым представлением и exp. о/п. 03.02.2017
  • Это просто пример, т.е. среднее может быть значением с плавающей запятой 03.02.2017

Ответы:


1

Awk может помочь вам с этим,

awk 'BEGIN{FS=OFS=","}{unique[$3]+=$4; count[$3]++;}END{for (i in unique) print i, unique[i]/count[i]}' file
x-junction-path validator,7
Invalid content type requested by client ,4.66667
Invalid content type sent by client ,7
Request body is proxied successfully to the backend,7.33333
End-to-end request-response,9.33333

Также возможно с printf с точностью .2 градусов в арифметике с плавающей запятой, как

awk 'BEGIN{FS=","}{unique[$3]+=$4; count[$3]++;}END{for (i in unique) printf "%s,%0.2f\n", i, unique[i]/count[i]}' file
x-junction-path validator,7.00
Invalid content type requested by client ,4.67
Invalid content type sent by client ,7.00
Request body is proxied successfully to the backend,7.33
End-to-end request-response,9.33
03.02.2017
Новые материалы
Коллекции публикаций по глубокому обучению
Последние пару месяцев я создавал коллекции последних академических публикаций по различным подполям глубокого обучения в моем блоге https://amundtveit.com - эта публикация дает обзор 25..
Представляем: Pepita
Фреймворк JavaScript с открытым исходным кодом Я знаю, что недостатка в фреймворках JavaScript нет. Но я просто не мог остановиться. Я хотел написать что-то сам, со своими собственными..
Советы по коду Laravel #2
1-) Найти // You can specify the columns you need // in when you use the find method on a model User::find(‘id’, [‘email’,’name’]); // You can increment or decrement // a field in..
Работа с временными рядами спутниковых изображений, часть 3 (аналитика данных)
Анализ временных рядов спутниковых изображений для данных наблюдений за большой Землей (arXiv) Автор: Рольф Симоэс , Жильберто Камара , Жильберто Кейрос , Фелипе Соуза , Педро Р. Андраде ,..
3 способа решить квадратное уравнение (3-й мой любимый) -
1. Методом факторизации — 2. Используя квадратичную формулу — 3. Заполнив квадрат — Давайте поймем это, решив это простое уравнение: Мы пытаемся сделать LHS,..
Создание VR-миров с A-Frame
Виртуальная реальность (и дополненная реальность) стали главными модными терминами в образовательных технологиях. С недорогими VR-гарнитурами, такими как Google Cardboard , и использованием..
Демистификация рекурсии
КОДЕКС Демистификация рекурсии Упрощенная концепция ошеломляющей О чем весь этот шум? Рекурсия, кажется, единственная тема, от которой у каждого начинающего студента-информатика..