Status Job ID Links Posted Started Updated
Runtime
Duration
In Waiting
Machine Teuthology Branch OS Type OS Version
pass 2327624 2018-03-27 08:29:43 2018-03-27 08:29:48 2018-03-27 08:57:47 0:27:59 0:22:48 0:05:11 smithi master
pass 2327625 2018-03-27 08:29:44 2018-03-27 08:29:48 2018-03-27 08:45:48 0:16:00 0:09:40 0:06:20 smithi master
pass 2327626 2018-03-27 08:29:45 2018-03-27 08:29:48 2018-03-27 08:47:47 0:17:59 0:10:53 0:07:06 smithi master
pass 2327627 2018-03-27 08:29:45 2018-03-27 08:29:48 2018-03-27 08:47:47 0:17:59 0:11:40 0:06:19 smithi master
pass 2327628 2018-03-27 08:29:46 2018-03-27 08:29:48 2018-03-27 08:47:47 0:17:59 0:09:46 0:08:13 smithi master
pass 2327629 2018-03-27 08:29:47 2018-03-27 08:29:48 2018-03-27 08:41:47 0:11:59 0:06:09 0:05:50 smithi master
pass 2327630 2018-03-27 08:29:48 2018-03-27 08:29:49 2018-03-27 08:49:48 0:19:59 0:13:21 0:06:38 smithi master
pass 2327631 2018-03-27 08:29:48 2018-03-27 08:29:50 2018-03-27 09:03:49 0:33:59 0:28:13 0:05:46 smithi master
pass 2327632 2018-03-27 08:29:49 2018-03-27 08:29:50 2018-03-27 09:01:50 0:32:00 0:25:55 0:06:05 smithi master centos 7.4
pass 2327633 2018-03-27 08:29:50 2018-03-27 08:29:51 2018-03-27 08:55:51 0:26:00 0:20:09 0:05:51 smithi master
pass 2327634 2018-03-27 08:29:51 2018-03-27 08:29:52 2018-03-27 08:47:51 0:17:59 0:11:52 0:06:07 smithi master
pass 2327635 2018-03-27 08:29:51 2018-03-27 08:29:52 2018-03-27 08:59:52 0:30:00 0:22:51 0:07:09 smithi master
pass 2327636 2018-03-27 08:29:52 2018-03-27 08:29:53 2018-03-27 08:41:52 0:11:59 0:04:58 0:07:01 smithi master
pass 2327637 2018-03-27 08:29:53 2018-03-27 08:29:54 2018-03-27 08:55:53 0:25:59 0:14:47 0:11:12 smithi master
pass 2327638 2018-03-27 08:29:53 2018-03-27 08:29:54 2018-03-27 08:47:54 0:18:00 0:10:49 0:07:11 smithi master
pass 2327639 2018-03-27 08:29:54 2018-03-27 08:29:55 2018-03-27 08:49:55 0:20:00 0:09:03 0:10:57 smithi master
pass 2327640 2018-03-27 08:29:55 2018-03-27 08:29:56 2018-03-27 09:05:56 0:36:00 0:25:53 0:10:07 smithi master
fail 2327641 2018-03-27 08:29:55 2018-03-27 08:29:57 2018-03-27 09:03:57 0:34:00 0:19:32 0:14:28 smithi master
Failure Reason:

"2018-03-27 08:48:10.104990 mon.a mon.0 172.21.15.8:6789/0 318 : cluster [WRN] Health check failed: 2 slow ops, oldest one blocked for 32 sec (SLOW_OPS)" in cluster log

pass 2327642 2018-03-27 08:29:56 2018-03-27 08:29:57 2018-03-27 08:55:57 0:26:00 0:11:56 0:14:04 smithi master
pass 2327643 2018-03-27 08:29:57 2018-03-27 08:29:58 2018-03-27 08:45:57 0:15:59 0:06:09 0:09:50 smithi master
pass 2327644 2018-03-27 08:29:57 2018-03-27 08:29:59 2018-03-27 09:01:59 0:32:00 0:21:00 0:11:00 smithi master
pass 2327645 2018-03-27 08:29:58 2018-03-27 08:29:59 2018-03-27 09:03:59 0:34:00 0:22:08 0:11:52 smithi master
pass 2327646 2018-03-27 08:29:59 2018-03-27 08:30:00 2018-03-27 09:02:00 0:32:00 0:16:52 0:15:08 smithi master
pass 2327647 2018-03-27 08:29:59 2018-03-27 08:30:00 2018-03-27 08:48:00 0:18:00 0:10:33 0:07:27 smithi master
fail 2327648 2018-03-27 08:30:00 2018-03-27 08:30:01 2018-03-27 09:18:02 0:48:01 0:32:22 0:15:39 smithi master
Failure Reason:

"2018-03-27 08:59:38.956219 mon.f mon.0 172.21.15.13:6789/0 85 : cluster [WRN] Health check failed: 1 slow ops, oldest one blocked for 31 sec (SLOW_OPS)" in cluster log

pass 2327649 2018-03-27 08:30:01 2018-03-27 08:30:02 2018-03-27 09:06:02 0:36:00 0:29:44 0:06:16 smithi master
fail 2327650 2018-03-27 08:30:02 2018-03-27 08:30:03 2018-03-27 08:48:02 0:17:59 0:11:25 0:06:34 smithi master
Failure Reason:

"2018-03-27 08:40:28.489607 mon.a mon.0 172.21.15.161:6789/0 335 : cluster [WRN] Health check failed: 3 slow ops, oldest one blocked for 34 sec (SLOW_OPS)" in cluster log

pass 2327651 2018-03-27 08:30:02 2018-03-27 08:30:03 2018-03-27 08:54:03 0:24:00 0:17:13 0:06:47 smithi master
pass 2327652 2018-03-27 08:30:03 2018-03-27 08:30:04 2018-03-27 09:00:04 0:30:00 0:23:09 0:06:51 smithi master
pass 2327653 2018-03-27 08:30:04 2018-03-27 08:30:05 2018-03-27 09:32:05 1:02:00 0:52:36 0:09:24 smithi master
pass 2327654 2018-03-27 08:30:04 2018-03-27 08:30:21 2018-03-27 08:56:21 0:26:00 0:10:20 0:15:40 smithi master
pass 2327655 2018-03-27 08:30:05 2018-03-27 08:30:21 2018-03-27 08:46:21 0:16:00 0:08:55 0:07:05 smithi master
pass 2327656 2018-03-27 08:30:06 2018-03-27 08:30:22 2018-03-27 09:00:22 0:30:00 0:13:04 0:16:56 smithi master
pass 2327657 2018-03-27 08:30:06 2018-03-27 08:31:22 2018-03-27 08:57:22 0:26:00 0:11:52 0:14:08 smithi master
pass 2327658 2018-03-27 08:30:07 2018-03-27 08:31:22 2018-03-27 09:07:22 0:36:00 0:14:55 0:21:05 smithi master
fail 2327659 2018-03-27 08:30:08 2018-03-27 08:31:22 2018-03-27 09:01:22 0:30:00 0:08:48 0:21:12 smithi master
Failure Reason:

"2018-03-27 08:58:07.092222 mon.b mon.0 172.21.15.16:6789/0 264 : cluster [WRN] Health check failed: 1 slow ops, oldest one blocked for 30 sec (SLOW_OPS)" in cluster log

fail 2327660 2018-03-27 08:30:08 2018-03-27 08:33:20 2018-03-27 08:47:19 0:13:59 0:06:32 0:07:27 smithi master
Failure Reason:

"2018-03-27 08:44:33.880423 mon.a mon.0 172.21.15.52:6789/0 158 : cluster [WRN] Health check failed: 2 slow ops, oldest one blocked for 33 sec (SLOW_OPS)" in cluster log

pass 2327661 2018-03-27 08:30:09 2018-03-27 08:35:11 2018-03-27 09:05:11 0:30:00 0:20:38 0:09:22 smithi master
pass 2327662 2018-03-27 08:30:10 2018-03-27 08:35:11 2018-03-27 08:55:11 0:20:00 0:08:58 0:11:02 smithi master
pass 2327663 2018-03-27 08:30:10 2018-03-27 08:35:11 2018-03-27 09:03:11 0:28:00 0:21:35 0:06:25 smithi master
pass 2327664 2018-03-27 08:30:11 2018-03-27 08:35:25 2018-03-27 08:55:25 0:20:00 0:11:56 0:08:04 smithi master
pass 2327665 2018-03-27 08:30:12 2018-03-27 08:37:23 2018-03-27 09:09:22 0:31:59 0:16:40 0:15:19 smithi master
pass 2327666 2018-03-27 08:30:12 2018-03-27 08:37:23 2018-03-27 08:49:22 0:11:59 0:05:32 0:06:27 smithi master
pass 2327667 2018-03-27 08:30:13 2018-03-27 08:37:38 2018-03-27 09:35:38 0:58:00 0:52:23 0:05:37 smithi master
pass 2327668 2018-03-27 08:30:14 2018-03-27 08:37:41 2018-03-27 08:59:40 0:21:59 0:13:08 0:08:51 smithi master
pass 2327669 2018-03-27 08:30:14 2018-03-27 08:39:19 2018-03-27 09:11:19 0:32:00 0:24:32 0:07:28 smithi master
pass 2327670 2018-03-27 08:30:15 2018-03-27 08:39:19 2018-03-27 09:11:19 0:32:00 0:24:39 0:07:21 smithi master
pass 2327671 2018-03-27 08:30:16 2018-03-27 08:39:23 2018-03-27 09:35:24 0:56:01 0:09:57 0:46:04 smithi master
pass 2327672 2018-03-27 08:30:16 2018-03-27 08:39:32 2018-03-27 08:57:32 0:18:00 0:09:01 0:08:59 smithi master
pass 2327673 2018-03-27 08:30:17 2018-03-27 08:39:42 2018-03-27 09:03:42 0:24:00 0:17:30 0:06:30 smithi master
pass 2327674 2018-03-27 08:30:18 2018-03-27 08:41:11 2018-03-27 08:57:10 0:15:59 0:06:57 0:09:02 smithi master
pass 2327675 2018-03-27 08:30:18 2018-03-27 08:41:13 2018-03-27 09:01:13 0:20:00 0:11:45 0:08:15 smithi master
pass 2327676 2018-03-27 08:30:19 2018-03-27 08:41:13 2018-03-27 09:05:13 0:24:00 0:16:26 0:07:34 smithi master
pass 2327677 2018-03-27 08:30:20 2018-03-27 08:41:20 2018-03-27 08:57:20 0:16:00 0:09:32 0:06:28 smithi master
pass 2327678 2018-03-27 08:30:20 2018-03-27 08:41:29 2018-03-27 09:11:29 0:30:00 0:21:28 0:08:32 smithi master
pass 2327679 2018-03-27 08:30:21 2018-03-27 08:41:31 2018-03-27 09:13:31 0:32:00 0:21:56 0:10:04 smithi master
pass 2327680 2018-03-27 08:30:22 2018-03-27 08:41:51 2018-03-27 09:11:51 0:30:00 0:21:12 0:08:48 smithi master
pass 2327681 2018-03-27 08:30:22 2018-03-27 08:41:51 2018-03-27 09:01:50 0:19:59 0:10:00 0:09:59 smithi master
pass 2327682 2018-03-27 08:30:23 2018-03-27 08:41:54 2018-03-27 09:15:53 0:33:59 0:09:54 0:24:05 smithi master
pass 2327683 2018-03-27 08:30:24 2018-03-27 08:43:21 2018-03-27 09:13:21 0:30:00 0:21:48 0:08:12 smithi master ubuntu 16.04
fail 2327684 2018-03-27 08:30:24 2018-03-27 08:43:22 2018-03-27 09:01:21 0:17:59 0:10:14 0:07:45 smithi master
Failure Reason:

"2018-03-27 08:55:06.861661 mon.a mon.0 172.21.15.149:6789/0 85 : cluster [WRN] Health check failed: 2 slow ops, oldest one blocked for 32 sec (SLOW_OPS)" in cluster log

pass 2327685 2018-03-27 08:30:25 2018-03-27 08:43:26 2018-03-27 09:15:26 0:32:00 0:25:15 0:06:45 smithi master
pass 2327686 2018-03-27 08:30:26 2018-03-27 08:43:30 2018-03-27 09:01:29 0:17:59 0:10:50 0:07:09 smithi master
pass 2327687 2018-03-27 08:30:26 2018-03-27 08:43:30 2018-03-27 09:07:30 0:24:00 0:16:54 0:07:06 smithi master
pass 2327688 2018-03-27 08:30:27 2018-03-27 08:45:22 2018-03-27 09:27:22 0:42:00 0:36:05 0:05:55 smithi master
pass 2327689 2018-03-27 08:30:28 2018-03-27 08:45:22 2018-03-27 09:03:22 0:18:00 0:10:37 0:07:23 smithi master
pass 2327690 2018-03-27 08:30:28 2018-03-27 08:45:36 2018-03-27 09:03:35 0:17:59 0:11:54 0:06:05 smithi master
pass 2327691 2018-03-27 08:30:29 2018-03-27 08:45:36 2018-03-27 09:03:35 0:17:59 0:11:29 0:06:30 smithi master
pass 2327692 2018-03-27 08:30:30 2018-03-27 08:45:44 2018-03-27 09:03:43 0:17:59 0:11:31 0:06:28 smithi master
fail 2327693 2018-03-27 08:30:30 2018-03-27 08:45:49 2018-03-27 09:09:48 0:23:59 0:16:43 0:07:16 smithi master
Failure Reason:

"2018-03-27 08:56:54.667158 mon.a mon.1 172.21.15.181:6789/0 62 : cluster [WRN] Health check failed: 2 slow ops, oldest one blocked for 33 sec (SLOW_OPS)" in cluster log

pass 2327694 2018-03-27 08:30:31 2018-03-27 08:45:59 2018-03-27 09:05:58 0:19:59 0:12:39 0:07:20 smithi master
pass 2327695 2018-03-27 08:30:32 2018-03-27 08:46:34 2018-03-27 09:02:33 0:15:59 0:09:07 0:06:52 smithi master
pass 2327696 2018-03-27 08:30:32 2018-03-27 08:47:19 2018-03-27 09:15:19 0:28:00 0:21:40 0:06:20 smithi master
pass 2327697 2018-03-27 08:30:33 2018-03-27 08:47:21 2018-03-27 09:13:20 0:25:59 0:18:49 0:07:10 smithi master
pass 2327698 2018-03-27 08:30:34 2018-03-27 08:47:21 2018-03-27 09:19:21 0:32:00 0:24:59 0:07:01 smithi master
pass 2327699 2018-03-27 08:30:34 2018-03-27 08:47:25 2018-03-27 09:15:25 0:28:00 0:12:07 0:15:53 smithi master
pass 2327700 2018-03-27 08:30:35 2018-03-27 08:47:44 2018-03-27 09:03:44 0:16:00 0:09:20 0:06:40 smithi master
pass 2327701 2018-03-27 08:30:36 2018-03-27 08:47:45 2018-03-27 09:01:44 0:13:59 0:05:34 0:08:25 smithi master
pass 2327702 2018-03-27 08:30:36 2018-03-27 08:47:45 2018-03-27 09:15:44 0:27:59 0:13:23 0:14:36 smithi master
pass 2327703 2018-03-27 08:30:37 2018-03-27 08:47:49 2018-03-27 09:07:48 0:19:59 0:13:08 0:06:51 smithi master
pass 2327704 2018-03-27 08:30:38 2018-03-27 08:47:50 2018-03-27 09:11:48 0:23:58 0:15:56 0:08:02 smithi master
pass 2327705 2018-03-27 08:30:38 2018-03-27 08:47:50 2018-03-27 09:05:48 0:17:58 0:10:38 0:07:20 smithi master
fail 2327706 2018-03-27 08:30:39 2018-03-27 08:47:52 2018-03-27 09:07:52 0:20:00 0:13:23 0:06:37 smithi master
Failure Reason:

"2018-03-27 08:59:39.703673 mon.a mon.0 172.21.15.134:6789/0 117 : cluster [WRN] Health check failed: 2 slow ops, oldest one blocked for 32 sec (SLOW_OPS)" in cluster log

pass 2327707 2018-03-27 08:30:40 2018-03-27 08:47:55 2018-03-27 09:27:55 0:40:00 0:25:59 0:14:01 smithi master
dead 2327708 2018-03-27 08:30:40 2018-03-27 08:48:01 2018-03-27 20:50:31 12:02:30 smithi master
fail 2327709 2018-03-27 08:30:41 2018-03-27 08:48:03 2018-03-27 09:02:03 0:14:00 0:06:16 0:07:44 smithi master
Failure Reason:

"2018-03-27 08:59:19.460421 mon.a mon.0 172.21.15.61:6789/0 122 : cluster [WRN] Health check failed: 2 slow ops, oldest one blocked for 34 sec (SLOW_OPS)" in cluster log

pass 2327710 2018-03-27 08:30:42 2018-03-27 08:49:22 2018-03-27 09:21:22 0:32:00 0:24:09 0:07:51 smithi master
pass 2327711 2018-03-27 08:30:42 2018-03-27 08:49:22 2018-03-27 09:07:22 0:18:00 0:10:18 0:07:42 smithi master
pass 2327712 2018-03-27 08:30:43 2018-03-27 08:49:23 2018-03-27 09:09:22 0:19:59 0:09:03 0:10:56 smithi master
pass 2327713 2018-03-27 08:30:44 2018-03-27 08:49:24 2018-03-27 09:33:24 0:44:00 0:29:27 0:14:33 smithi master
pass 2327714 2018-03-27 08:30:44 2018-03-27 08:49:33 2018-03-27 09:07:32 0:17:59 0:11:38 0:06:21 smithi master
pass 2327715 2018-03-27 08:30:45 2018-03-27 08:49:33 2018-03-27 09:17:32 0:27:59 0:19:33 0:08:26 smithi master
pass 2327716 2018-03-27 08:30:46 2018-03-27 08:49:37 2018-03-27 09:23:36 0:33:59 0:26:42 0:07:17 smithi master
pass 2327717 2018-03-27 08:30:46 2018-03-27 08:49:44 2018-03-27 09:51:44 1:02:00 0:50:46 0:11:14 smithi master
pass 2327718 2018-03-27 08:30:47 2018-03-27 08:49:50 2018-03-27 09:03:49 0:13:59 0:06:28 0:07:31 smithi master
pass 2327719 2018-03-27 08:30:48 2018-03-27 08:49:56 2018-03-27 09:13:55 0:23:59 0:12:21 0:11:38 smithi master
pass 2327720 2018-03-27 08:30:48 2018-03-27 08:51:23 2018-03-27 09:31:23 0:40:00 0:33:49 0:06:11 smithi master
pass 2327721 2018-03-27 08:30:49 2018-03-27 08:51:23 2018-03-27 09:09:22 0:17:59 0:10:05 0:07:54 smithi master
pass 2327722 2018-03-27 08:30:50 2018-03-27 08:51:25 2018-03-27 09:13:24 0:21:59 0:10:14 0:11:45 smithi master
pass 2327723 2018-03-27 08:30:50 2018-03-27 08:51:38 2018-03-27 09:11:37 0:19:59 0:13:32 0:06:27 smithi master
fail 2327724 2018-03-27 08:30:51 2018-03-27 08:53:30 2018-03-27 09:43:30 0:50:00 0:42:22 0:07:38 smithi master
Failure Reason:

'wait_until_healthy' reached maximum tries (150) after waiting for 900 seconds

pass 2327725 2018-03-27 08:30:52 2018-03-27 08:53:30 2018-03-27 09:17:29 0:23:59 0:15:17 0:08:42 smithi master
pass 2327726 2018-03-27 08:30:52 2018-03-27 08:54:04 2018-03-27 09:18:04 0:24:00 0:18:34 0:05:26 smithi master
pass 2327727 2018-03-27 08:30:53 2018-03-27 08:55:21 2018-03-27 09:23:21 0:28:00 0:22:43 0:05:17 smithi master
fail 2327728 2018-03-27 08:30:54 2018-03-27 08:55:21 2018-03-27 09:09:20 0:13:59 0:07:08 0:06:51 smithi master
Failure Reason:

"2018-03-27 09:06:40.958883 mon.b mon.0 172.21.15.51:6789/0 155 : cluster [WRN] Health check failed: 1 slow ops, oldest one blocked for 30 sec (SLOW_OPS)" in cluster log

pass 2327729 2018-03-27 08:30:54 2018-03-27 08:55:26 2018-03-27 09:09:25 0:13:59 0:06:50 0:07:09 smithi master
pass 2327730 2018-03-27 08:30:55 2018-03-27 08:55:40 2018-03-27 09:27:39 0:31:59 0:20:18 0:11:41 smithi master
fail 2327731 2018-03-27 08:30:56 2018-03-27 08:55:52 2018-03-27 09:29:52 0:34:00 0:21:13 0:12:47 smithi master centos
Failure Reason:

"2018-03-27 09:21:21.128393 mon.b mon.1 172.21.15.99:6789/0 20 : cluster [WRN] Health check failed: 2 slow ops, oldest one blocked for 32 sec (SLOW_OPS)" in cluster log

pass 2327732 2018-03-27 08:30:56 2018-03-27 08:55:54 2018-03-27 09:27:54 0:32:00 0:23:17 0:08:43 smithi master
pass 2327733 2018-03-27 08:30:57 2018-03-27 08:55:58 2018-03-27 09:15:58 0:20:00 0:11:30 0:08:30 smithi master
pass 2327734 2018-03-27 08:30:58 2018-03-27 08:56:31 2018-03-27 09:34:31 0:38:00 0:26:17 0:11:43 smithi master
pass 2327735 2018-03-27 08:30:59 2018-03-27 08:57:11 2018-03-27 09:35:11 0:38:00 0:26:33 0:11:27 smithi master centos 7.4
pass 2327736 2018-03-27 08:30:59 2018-03-27 08:57:12 2018-03-27 09:21:11 0:23:59 0:13:34 0:10:25 smithi master
pass 2327737 2018-03-27 08:31:00 2018-03-27 08:57:16 2018-03-27 09:13:16 0:16:00 0:10:15 0:05:45 smithi master
pass 2327738 2018-03-27 08:31:01 2018-03-27 08:57:21 2018-03-27 09:25:21 0:28:00 0:17:31 0:10:29 smithi master
pass 2327739 2018-03-27 08:31:01 2018-03-27 08:57:23 2018-03-27 09:17:23 0:20:00 0:07:50 0:12:10 smithi master
pass 2327740 2018-03-27 08:31:02 2018-03-27 08:57:27 2018-03-27 09:19:26 0:21:59 0:12:07 0:09:52 smithi master
pass 2327741 2018-03-27 08:31:03 2018-03-27 08:57:42 2018-03-27 14:13:50 5:16:08 5:04:36 0:11:32 smithi master
pass 2327742 2018-03-27 08:31:03 2018-03-27 08:57:48 2018-03-27 09:25:48 0:28:00 0:18:49 0:09:11 smithi master
pass 2327743 2018-03-27 08:31:04 2018-03-27 08:59:51 2018-03-27 09:27:50 0:27:59 0:21:28 0:06:31 smithi master
pass 2327744 2018-03-27 08:31:05 2018-03-27 08:59:53 2018-03-27 09:27:53 0:28:00 0:16:55 0:11:05 smithi master
pass 2327745 2018-03-27 08:31:05 2018-03-27 09:00:05 2018-03-27 09:26:05 0:26:00 0:19:36 0:06:24 smithi master
pass 2327746 2018-03-27 08:31:06 2018-03-27 09:00:23 2018-03-27 09:20:22 0:19:59 0:11:17 0:08:42 smithi master
pass 2327747 2018-03-27 08:31:07 2018-03-27 09:01:15 2018-03-27 09:33:14 0:31:59 0:25:21 0:06:38 smithi master
pass 2327748 2018-03-27 08:31:07 2018-03-27 09:01:22 2018-03-27 09:17:22 0:16:00 0:08:45 0:07:15 smithi master
pass 2327749 2018-03-27 08:31:08 2018-03-27 09:01:23 2018-03-27 09:29:23 0:28:00 0:19:15 0:08:45 smithi master
pass 2327750 2018-03-27 08:31:09 2018-03-27 09:01:30 2018-03-27 09:25:30 0:24:00 0:16:25 0:07:35 smithi master centos
pass 2327751 2018-03-27 08:31:10 2018-03-27 09:01:45 2018-03-27 09:31:45 0:30:00 0:19:47 0:10:13 smithi master
pass 2327752 2018-03-27 08:31:10 2018-03-27 09:01:51 2018-03-27 09:35:51 0:34:00 0:27:31 0:06:29 smithi master
pass 2327753 2018-03-27 08:31:11 2018-03-27 09:01:52 2018-03-27 09:21:51 0:19:59 0:12:54 0:07:05 smithi master
pass 2327754 2018-03-27 08:31:12 2018-03-27 09:02:01 2018-03-27 09:20:00 0:17:59 0:11:34 0:06:25 smithi master
pass 2327755 2018-03-27 08:31:12 2018-03-27 09:02:02 2018-03-27 09:20:02 0:18:00 0:12:02 0:05:58 smithi master
pass 2327756 2018-03-27 08:31:13 2018-03-27 09:02:13 2018-03-27 09:20:13 0:18:00 0:11:37 0:06:23 smithi master
pass 2327757 2018-03-27 08:31:14 2018-03-27 09:02:34 2018-03-27 09:24:34 0:22:00 0:07:29 0:14:31 smithi master
pass 2327758 2018-03-27 08:31:14 2018-03-27 09:03:12 2018-03-27 09:25:12 0:22:00 0:14:18 0:07:42 smithi master
pass 2327759 2018-03-27 08:31:15 2018-03-27 09:03:34 2018-03-27 09:27:33 0:23:59 0:13:16 0:10:43 smithi master
pass 2327760 2018-03-27 08:31:16 2018-03-27 09:03:37 2018-03-27 09:29:36 0:25:59 0:17:24 0:08:35 smithi master
pass 2327761 2018-03-27 08:31:17 2018-03-27 09:03:37 2018-03-27 09:39:37 0:36:00 0:24:32 0:11:28 smithi master
pass 2327762 2018-03-27 08:31:17 2018-03-27 09:03:43 2018-03-27 09:29:43 0:26:00 0:13:13 0:12:47 smithi master
pass 2327763 2018-03-27 08:31:18 2018-03-27 09:03:44 2018-03-27 09:23:44 0:20:00 0:10:29 0:09:31 smithi master
pass 2327764 2018-03-27 08:31:19 2018-03-27 09:03:45 2018-03-27 10:11:46 1:08:01 1:01:45 0:06:16 smithi master
pass 2327765 2018-03-27 08:31:20 2018-03-27 09:03:50 2018-03-27 09:27:50 0:24:00 0:16:59 0:07:01 smithi master
pass 2327766 2018-03-27 08:31:20 2018-03-27 09:03:51 2018-03-27 09:23:50 0:19:59 0:10:11 0:09:48 smithi master
pass 2327767 2018-03-27 08:31:21 2018-03-27 09:03:58 2018-03-27 09:21:58 0:18:00 0:10:38 0:07:22 smithi master
pass 2327768 2018-03-27 08:31:22 2018-03-27 09:04:00 2018-03-27 09:38:00 0:34:00 0:26:06 0:07:54 smithi master
pass 2327769 2018-03-27 08:31:22 2018-03-27 09:05:21 2018-03-27 09:33:20 0:27:59 0:19:42 0:08:17 smithi master
pass 2327770 2018-03-27 08:31:23 2018-03-27 09:05:21 2018-03-27 09:21:20 0:15:59 0:06:13 0:09:46 smithi master
pass 2327771 2018-03-27 08:31:24 2018-03-27 09:05:49 2018-03-27 09:21:49 0:16:00 0:09:34 0:06:26 smithi master
pass 2327772 2018-03-27 08:31:24 2018-03-27 09:05:57 2018-03-27 09:19:56 0:13:59 0:06:11 0:07:48 smithi master
pass 2327773 2018-03-27 08:31:25 2018-03-27 09:06:00 2018-03-27 09:35:59 0:29:59 0:22:23 0:07:36 smithi master
pass 2327774 2018-03-27 08:31:26 2018-03-27 09:06:03 2018-03-27 09:24:03 0:18:00 0:08:44 0:09:16 smithi master
pass 2327775 2018-03-27 08:31:26 2018-03-27 09:07:23 2018-03-27 09:21:23 0:14:00 0:06:36 0:07:24 smithi master
pass 2327776 2018-03-27 08:31:27 2018-03-27 09:07:24 2018-03-27 09:25:23 0:17:59 0:10:02 0:07:57 smithi master
pass 2327777 2018-03-27 08:31:28 2018-03-27 09:07:32 2018-03-27 10:57:33 1:50:01 1:41:15 0:08:46 smithi master
fail 2327778 2018-03-27 08:31:28 2018-03-27 09:07:45 2018-03-27 09:35:44 0:27:59 0:17:06 0:10:53 smithi master
Failure Reason:

"2018-03-27 09:22:09.330788 mon.b mon.0 172.21.15.135:6789/0 93 : cluster [WRN] Health check failed: 2 slow ops, oldest one blocked for 32 sec (SLOW_OPS)" in cluster log

pass 2327779 2018-03-27 08:31:29 2018-03-27 09:07:49 2018-03-27 09:35:49 0:28:00 0:20:47 0:07:13 smithi master
pass 2327780 2018-03-27 08:31:30 2018-03-27 09:07:54 2018-03-27 09:27:53 0:19:59 0:10:25 0:09:34 smithi master
pass 2327781 2018-03-27 08:31:30 2018-03-27 09:09:33 2018-03-27 09:25:32 0:15:59 0:07:43 0:08:16 smithi master
pass 2327782 2018-03-27 08:31:31 2018-03-27 09:09:34 2018-03-27 09:43:33 0:33:59 0:21:16 0:12:43 smithi master
pass 2327783 2018-03-27 08:31:32 2018-03-27 09:09:33 2018-03-27 09:33:32 0:23:59 0:18:12 0:05:47 smithi master
pass 2327784 2018-03-27 08:31:32 2018-03-27 09:09:33 2018-03-27 09:37:32 0:27:59 0:19:00 0:08:59 smithi master
pass 2327785 2018-03-27 08:31:33 2018-03-27 09:09:33 2018-03-27 09:55:33 0:46:00 0:37:48 0:08:12 smithi master
pass 2327786 2018-03-27 08:31:34 2018-03-27 09:09:33 2018-03-27 09:41:33 0:32:00 0:09:04 0:22:56 smithi master
pass 2327787 2018-03-27 08:31:35 2018-03-27 09:09:50 2018-03-27 09:39:50 0:30:00 0:22:48 0:07:12 smithi master ubuntu 16.04
pass 2327788 2018-03-27 08:31:35 2018-03-27 09:11:33 2018-03-27 09:29:32 0:17:59 0:10:35 0:07:24 smithi master
pass 2327789 2018-03-27 08:31:36 2018-03-27 09:11:34 2018-03-27 09:31:33 0:19:59 0:12:23 0:07:36 smithi master
pass 2327790 2018-03-27 08:31:37 2018-03-27 09:11:34 2018-03-27 09:27:33 0:15:59 0:09:54 0:06:05 smithi master
pass 2327791 2018-03-27 08:31:37 2018-03-27 09:11:34 2018-03-27 09:33:33 0:21:59 0:10:28 0:11:31 smithi master
fail 2327792 2018-03-27 08:31:38 2018-03-27 09:11:39 2018-03-27 09:33:38 0:21:59 0:13:48 0:08:11 smithi master
Failure Reason:

"2018-03-27 09:24:08.185013 mon.a mon.0 172.21.15.19:6789/0 44 : cluster [WRN] Health check failed: 9 slow ops, oldest one blocked for 34 sec (SLOW_OPS)" in cluster log

pass 2327793 2018-03-27 08:31:39 2018-03-27 09:11:50 2018-03-27 09:43:49 0:31:59 0:19:34 0:12:25 smithi master
pass 2327794 2018-03-27 08:31:39 2018-03-27 09:11:52 2018-03-27 09:37:52 0:26:00 0:20:25 0:05:35 smithi master
pass 2327795 2018-03-27 08:31:40 2018-03-27 09:13:28 2018-03-27 09:37:27 0:23:59 0:15:39 0:08:20 smithi master
pass 2327796 2018-03-27 08:31:41 2018-03-27 09:13:28 2018-03-27 09:43:27 0:29:59 0:19:03 0:10:56 smithi master
pass 2327797 2018-03-27 08:31:41 2018-03-27 09:13:28 2018-03-27 09:29:27 0:15:59 0:08:31 0:07:28 smithi master
pass 2327798 2018-03-27 08:31:42 2018-03-27 09:13:28 2018-03-27 09:49:28 0:36:00 0:24:50 0:11:10 smithi master
pass 2327799 2018-03-27 08:31:43 2018-03-27 09:13:33 2018-03-27 09:33:32 0:19:59 0:12:42 0:07:17 smithi master
dead 2327800 2018-03-27 08:31:43 2018-03-27 09:13:57 2018-03-27 21:16:31 12:02:34 smithi master
pass 2327801 2018-03-27 08:31:44 2018-03-27 09:15:32 2018-03-27 09:43:31 0:27:59 0:21:14 0:06:45 smithi master
pass 2327802 2018-03-27 08:31:45 2018-03-27 09:15:32 2018-03-27 09:29:31 0:13:59 0:06:31 0:07:28 smithi master
pass 2327803 2018-03-27 08:31:46 2018-03-27 09:15:32 2018-03-27 09:37:31 0:21:59 0:11:44 0:10:15 smithi master
pass 2327804 2018-03-27 08:31:46 2018-03-27 09:15:46 2018-03-27 09:57:45 0:41:59 0:18:26 0:23:33 smithi master
pass 2327805 2018-03-27 08:31:47 2018-03-27 09:15:55 2018-03-27 09:39:54 0:23:59 0:11:38 0:12:21 smithi master
pass 2327806 2018-03-27 08:31:48 2018-03-27 09:15:59 2018-03-27 09:45:59 0:30:00 0:20:00 0:10:00 smithi master
pass 2327807 2018-03-27 08:31:48 2018-03-27 09:17:34 2018-03-27 09:33:33 0:15:59 0:06:12 0:09:47 smithi master
pass 2327808 2018-03-27 08:31:49 2018-03-27 09:17:34 2018-03-27 09:57:34 0:40:00 0:29:33 0:10:27 smithi master
pass 2327809 2018-03-27 08:31:50 2018-03-27 09:17:34 2018-03-27 09:49:34 0:32:00 0:18:58 0:13:02 smithi master
pass 2327810 2018-03-27 08:31:51 2018-03-27 09:17:34 2018-03-27 09:43:33 0:25:59 0:17:30 0:08:29 smithi master
pass 2327811 2018-03-27 08:31:51 2018-03-27 09:18:03 2018-03-27 09:36:02 0:17:59 0:11:03 0:06:56 smithi master
pass 2327812 2018-03-27 08:31:52 2018-03-27 09:18:05 2018-03-27 09:44:05 0:26:00 0:09:56 0:16:04 smithi master
pass 2327813 2018-03-27 08:31:53 2018-03-27 09:19:22 2018-03-27 09:53:22 0:34:00 0:26:05 0:07:55 smithi master
pass 2327814 2018-03-27 08:31:53 2018-03-27 09:19:28 2018-03-27 09:37:27 0:17:59 0:10:55 0:07:04 smithi master
pass 2327815 2018-03-27 08:31:54 2018-03-27 09:20:06 2018-03-27 10:02:06 0:42:00 0:22:44 0:19:16 smithi master
pass 2327816 2018-03-27 08:31:55 2018-03-27 09:20:06 2018-03-27 09:58:06 0:38:00 0:17:41 0:20:19 smithi master
pass 2327817 2018-03-27 08:31:55 2018-03-27 09:20:06 2018-03-27 10:26:07 1:06:01 0:45:39 0:20:22 smithi master
pass 2327818 2018-03-27 08:31:56 2018-03-27 09:20:14 2018-03-27 09:46:14 0:26:00 0:19:05 0:06:55 smithi master
pass 2327819 2018-03-27 08:31:57 2018-03-27 09:20:24 2018-03-27 09:36:23 0:15:59 0:09:24 0:06:35 smithi master
pass 2327820 2018-03-27 08:31:57 2018-03-27 09:21:21 2018-03-27 09:39:21 0:18:00 0:12:15 0:05:45 smithi master
fail 2327821 2018-03-27 08:31:58 2018-03-27 09:21:21 2018-03-27 09:41:20 0:19:59 0:11:02 0:08:57 smithi master
Failure Reason:

"2018-03-27 09:35:08.292476 mon.a mon.0 172.21.15.68:6789/0 120 : cluster [WRN] Health check failed: 1 slow ops, oldest one blocked for 30 sec (SLOW_OPS)" in cluster log

pass 2327822 2018-03-27 08:31:59 2018-03-27 09:21:23 2018-03-27 09:45:23 0:24:00 0:14:17 0:09:43 smithi master
pass 2327823 2018-03-27 08:31:59 2018-03-27 09:21:24 2018-03-27 09:33:23 0:11:59 0:06:04 0:05:55 smithi master
pass 2327824 2018-03-27 08:32:00 2018-03-27 09:21:50 2018-03-27 09:41:50 0:20:00 0:13:10 0:06:50 smithi master
pass 2327825 2018-03-27 08:32:01 2018-03-27 09:21:52 2018-03-27 09:43:52 0:22:00 0:13:30 0:08:30 smithi master
pass 2327826 2018-03-27 08:32:01 2018-03-27 09:21:59 2018-03-27 09:51:59 0:30:00 0:19:57 0:10:03 smithi master
pass 2327827 2018-03-27 08:32:02 2018-03-27 09:23:31 2018-03-27 09:51:31 0:28:00 0:21:46 0:06:14 smithi master
pass 2327828 2018-03-27 08:32:03 2018-03-27 09:23:38 2018-03-27 10:13:38 0:50:00 0:09:17 0:40:43 smithi master
fail 2327829 2018-03-27 08:32:03 2018-03-27 09:23:46 2018-03-27 09:37:45 0:13:59 0:06:58 0:07:01 smithi master
Failure Reason:

"2018-03-27 09:34:49.623846 mon.a mon.0 172.21.15.192:6789/0 91 : cluster [WRN] Health check failed: 2 slow ops, oldest one blocked for 32 sec (SLOW_OPS)" in cluster log

pass 2327830 2018-03-27 08:32:04 2018-03-27 09:23:52 2018-03-27 09:53:51 0:29:59 0:23:02 0:06:57 smithi master
pass 2327831 2018-03-27 08:32:05 2018-03-27 09:24:04 2018-03-27 09:46:03 0:21:59 0:14:39 0:07:20 smithi master
pass 2327832 2018-03-27 08:32:06 2018-03-27 09:24:46 2018-03-27 09:50:46 0:26:00 0:15:46 0:10:14 smithi master
pass 2327833 2018-03-27 08:32:06 2018-03-27 09:25:13 2018-03-27 09:55:13 0:30:00 0:24:02 0:05:58 smithi master
pass 2327834 2018-03-27 08:32:07 2018-03-27 09:25:22 2018-03-27 09:41:21 0:15:59 0:09:32 0:06:27 smithi master
pass 2327835 2018-03-27 08:32:08 2018-03-27 09:25:24 2018-03-27 09:43:24 0:18:00 0:10:38 0:07:22 smithi master
pass 2327836 2018-03-27 08:32:08 2018-03-27 09:25:31 2018-03-27 09:59:31 0:34:00 0:26:18 0:07:42 smithi master
pass 2327837 2018-03-27 08:32:09 2018-03-27 09:25:33 2018-03-27 09:55:33 0:30:00 0:23:15 0:06:45 smithi master centos 7.4
pass 2327838 2018-03-27 08:32:10 2018-03-27 09:26:00 2018-03-27 09:38:00 0:12:00 0:05:48 0:06:12 smithi master
pass 2327839 2018-03-27 08:32:10 2018-03-27 09:26:08 2018-03-27 09:50:06 0:23:58 0:16:09 0:07:49 smithi master
pass 2327840 2018-03-27 08:32:11 2018-03-27 09:27:33 2018-03-27 09:57:33 0:30:00 0:22:28 0:07:32 smithi master
pass 2327841 2018-03-27 08:32:12 2018-03-27 09:27:34 2018-03-27 10:01:34 0:34:00 0:23:08 0:10:52 smithi master
pass 2327842 2018-03-27 08:32:12 2018-03-27 09:27:35 2018-03-27 09:47:34 0:19:59 0:09:08 0:10:51 smithi master
pass 2327843 2018-03-27 08:32:13 2018-03-27 09:27:41 2018-03-27 09:47:40 0:19:59 0:14:26 0:05:33 smithi master
pass 2327844 2018-03-27 08:32:14 2018-03-27 09:27:51 2018-03-27 09:39:50 0:11:59 0:05:54 0:06:05 smithi master
pass 2327845 2018-03-27 08:32:14 2018-03-27 09:27:51 2018-03-27 10:03:51 0:36:00 0:30:18 0:05:42 smithi master
pass 2327846 2018-03-27 08:32:15 2018-03-27 09:27:54 2018-03-27 09:55:54 0:28:00 0:16:28 0:11:32 smithi master
pass 2327847 2018-03-27 08:32:16 2018-03-27 09:27:54 2018-03-27 09:43:54 0:16:00 0:08:14 0:07:46 smithi master
pass 2327848 2018-03-27 08:32:16 2018-03-27 09:27:55 2018-03-27 09:39:55 0:12:00 0:04:48 0:07:12 smithi master
pass 2327849 2018-03-27 08:32:17 2018-03-27 09:27:57 2018-03-27 10:11:57 0:44:00 0:38:00 0:06:00 smithi master
pass 2327850 2018-03-27 08:32:18 2018-03-27 09:29:33 2018-03-27 09:49:32 0:19:59 0:12:25 0:07:34 smithi master
fail 2327851 2018-03-27 08:32:18 2018-03-27 09:29:33 2018-03-27 09:51:33 0:22:00 0:12:21 0:09:39 smithi master
Failure Reason:

"2018-03-27 09:47:41.604250 mon.a mon.0 172.21.15.67:6789/0 97 : cluster [WRN] Health check failed: 1 slow ops, oldest one blocked for 31 sec (SLOW_OPS)" in cluster log

pass 2327852 2018-03-27 08:32:19 2018-03-27 09:29:33 2018-03-27 10:01:33 0:32:00 0:26:32 0:05:28 smithi master
pass 2327853 2018-03-27 08:32:20 2018-03-27 09:29:34 2018-03-27 09:59:33 0:29:59 0:22:21 0:07:38 smithi master centos
pass 2327854 2018-03-27 08:32:21 2018-03-27 09:29:37 2018-03-27 09:47:37 0:18:00 0:10:58 0:07:02 smithi master
fail 2327855 2018-03-27 08:32:21 2018-03-27 09:29:44 2018-03-27 09:55:44 0:26:00 0:15:15 0:10:45 smithi master
Failure Reason:

Test failure: test_pool_create (tasks.mgr.dashboard.test_pool.PoolTest)

pass 2327856 2018-03-27 08:32:22 2018-03-27 09:29:53 2018-03-27 09:47:52 0:17:59 0:11:35 0:06:24 smithi master
pass 2327857 2018-03-27 08:32:23 2018-03-27 09:31:34 2018-03-27 10:01:33 0:29:59 0:22:14 0:07:45 smithi master
pass 2327858 2018-03-27 08:32:23 2018-03-27 09:31:34 2018-03-27 09:49:33 0:17:59 0:10:40 0:07:19 smithi master
pass 2327859 2018-03-27 08:32:24 2018-03-27 09:31:46 2018-03-27 09:49:46 0:18:00 0:12:36 0:05:24 smithi master
pass 2327860 2018-03-27 08:32:25 2018-03-27 09:32:07 2018-03-27 09:48:06 0:15:59 0:07:57 0:08:02 smithi master
pass 2327861 2018-03-27 08:32:26 2018-03-27 09:33:28 2018-03-27 10:09:28 0:36:00 0:19:09 0:16:51 smithi master
pass 2327862 2018-03-27 08:32:26 2018-03-27 09:33:28 2018-03-27 10:17:28 0:44:00 0:29:35 0:14:25 smithi master
pass 2327863 2018-03-27 08:32:27 2018-03-27 09:33:28 2018-03-27 09:57:27 0:23:59 0:12:28 0:11:31 smithi master
pass 2327864 2018-03-27 08:32:28 2018-03-27 09:33:28 2018-03-27 09:53:27 0:19:59 0:12:37 0:07:22 smithi master
pass 2327865 2018-03-27 08:32:28 2018-03-27 09:33:33 2018-03-27 09:59:33 0:26:00 0:18:40 0:07:20 smithi master
pass 2327866 2018-03-27 08:32:29 2018-03-27 09:33:34 2018-03-27 09:53:33 0:19:59 0:12:16 0:07:43 smithi master
pass 2327867 2018-03-27 08:32:30 2018-03-27 09:33:34 2018-03-27 09:49:33 0:15:59 0:08:13 0:07:46 smithi master
fail 2327868 2018-03-27 08:32:30 2018-03-27 09:33:35 2018-03-27 09:55:34 0:21:59 0:14:21 0:07:38 smithi master
Failure Reason:

"2018-03-27 09:44:40.196799 mon.a mon.0 172.21.15.3:6789/0 131 : cluster [WRN] Health check failed: 1 slow ops, oldest one blocked for 30 sec (SLOW_OPS)" in cluster log

pass 2327869 2018-03-27 08:32:31 2018-03-27 09:33:39 2018-03-27 10:05:39 0:32:00 0:16:14 0:15:46 smithi master
fail 2327870 2018-03-27 08:32:32 2018-03-27 09:34:42 2018-03-27 10:08:42 0:34:00 0:24:44 0:09:16 smithi master
Failure Reason:

"2018-03-27 09:54:06.018246 mon.a mon.0 172.21.15.27:6789/0 484 : cluster [WRN] Health check failed: 16 slow ops, oldest one blocked for 61 sec (SLOW_OPS)" in cluster log

pass 2327871 2018-03-27 08:32:32 2018-03-27 09:35:13 2018-03-27 10:07:12 0:31:59 0:23:03 0:08:56 smithi master
pass 2327872 2018-03-27 08:32:33 2018-03-27 09:35:25 2018-03-27 10:03:25 0:28:00 0:20:00 0:08:00 smithi master
pass 2327873 2018-03-27 08:32:34 2018-03-27 09:35:39 2018-03-27 09:47:39 0:12:00 0:05:56 0:06:04 smithi master
pass 2327874 2018-03-27 08:32:35 2018-03-27 09:35:55 2018-03-27 09:53:55 0:18:00 0:10:57 0:07:03 smithi master
pass 2327875 2018-03-27 08:32:35 2018-03-27 09:35:55 2018-03-27 10:01:55 0:26:00 0:19:17 0:06:43 smithi master
pass 2327876 2018-03-27 08:32:36 2018-03-27 09:35:55 2018-03-27 09:53:55 0:18:00 0:09:24 0:08:36 smithi master
fail 2327877 2018-03-27 08:32:37 2018-03-27 09:36:01 2018-03-27 10:06:00 0:29:59 0:21:01 0:08:58 smithi master
Failure Reason:

"2018-03-27 09:47:16.317742 mon.a mon.0 172.21.15.71:6789/0 133 : cluster [WRN] Health check failed: 1 slow ops, oldest one blocked for 30 sec (SLOW_OPS)" in cluster log

pass 2327878 2018-03-27 08:32:37 2018-03-27 09:36:04 2018-03-27 10:06:03 0:29:59 0:24:17 0:05:42 smithi master
pass 2327879 2018-03-27 08:32:38 2018-03-27 09:36:25 2018-03-27 10:06:24 0:29:59 0:20:42 0:09:17 smithi master
pass 2327880 2018-03-27 08:32:39 2018-03-27 09:37:39 2018-03-27 11:55:42 2:18:03 2:11:32 0:06:31 smithi master
pass 2327881 2018-03-27 08:32:39 2018-03-27 09:37:39 2018-03-27 09:55:38 0:17:59 0:10:56 0:07:03 smithi master
pass 2327882 2018-03-27 08:32:40 2018-03-27 09:37:39 2018-03-27 10:13:38 0:35:59 0:09:56 0:26:03 smithi master
pass 2327883 2018-03-27 08:32:41 2018-03-27 09:37:39 2018-03-27 10:11:39 0:34:00 0:22:37 0:11:23 smithi master
pass 2327884 2018-03-27 08:32:42 2018-03-27 09:37:46 2018-03-27 09:57:46 0:20:00 0:11:13 0:08:47 smithi master
pass 2327885 2018-03-27 08:32:42 2018-03-27 09:37:53 2018-03-27 09:57:52 0:19:59 0:11:06 0:08:53 smithi master
pass 2327886 2018-03-27 08:32:43 2018-03-27 09:38:01 2018-03-27 09:50:00 0:11:59 0:04:46 0:07:13 smithi master
pass 2327887 2018-03-27 08:32:44 2018-03-27 09:38:01 2018-03-27 09:58:01 0:20:00 0:12:16 0:07:44 smithi master
pass 2327888 2018-03-27 08:32:44 2018-03-27 09:39:23 2018-03-27 10:03:22 0:23:59 0:09:22 0:14:37 smithi master
pass 2327889 2018-03-27 08:32:45 2018-03-27 09:39:38 2018-03-27 10:13:38 0:34:00 0:25:12 0:08:48 smithi master ubuntu 16.04
pass 2327890 2018-03-27 08:32:46 2018-03-27 09:40:06 2018-03-27 10:04:05 0:23:59 0:15:09 0:08:50 smithi master
pass 2327891 2018-03-27 08:32:46 2018-03-27 09:40:06 2018-03-27 09:58:05 0:17:59 0:09:25 0:08:34 smithi master
pass 2327892 2018-03-27 08:32:47 2018-03-27 09:40:06 2018-03-27 10:10:05 0:29:59 0:20:02 0:09:57 smithi master
pass 2327893 2018-03-27 08:32:48 2018-03-27 09:40:05 2018-03-27 10:12:05 0:32:00 0:25:50 0:06:10 smithi master
pass 2327894 2018-03-27 08:32:49 2018-03-27 09:41:30 2018-03-27 09:57:29 0:15:59 0:08:21 0:07:38 smithi master
pass 2327895 2018-03-27 08:32:49 2018-03-27 09:41:30 2018-03-27 10:01:30 0:20:00 0:11:40 0:08:20 smithi master
pass 2327896 2018-03-27 08:32:50 2018-03-27 09:41:34 2018-03-27 10:07:33 0:25:59 0:18:41 0:07:18 smithi master
pass 2327897 2018-03-27 08:32:51 2018-03-27 09:41:51 2018-03-27 09:55:50 0:13:59 0:06:44 0:07:15 smithi master
pass 2327898 2018-03-27 08:32:51 2018-03-27 09:43:35 2018-03-27 10:03:34 0:19:59 0:10:01 0:09:58 smithi master
pass 2327899 2018-03-27 08:32:52 2018-03-27 09:43:35 2018-03-27 10:15:34 0:31:59 0:25:05 0:06:54 smithi master
pass 2327900 2018-03-27 08:32:53 2018-03-27 09:43:35 2018-03-27 10:07:34 0:23:59 0:11:38 0:12:21 smithi master
pass 2327901 2018-03-27 08:32:53 2018-03-27 09:43:35 2018-03-27 10:05:35 0:22:00 0:08:51 0:13:09 smithi master
pass 2327902 2018-03-27 08:32:54 2018-03-27 09:43:35 2018-03-27 10:15:34 0:31:59 0:21:18 0:10:41 smithi master
pass 2327903 2018-03-27 08:32:55 2018-03-27 09:43:35 2018-03-27 10:11:34 0:27:59 0:17:35 0:10:24 smithi master
fail 2327904 2018-03-27 08:32:56 2018-03-27 09:43:51 2018-03-27 10:13:50 0:29:59 0:24:06 0:05:53 smithi master
Failure Reason:

"2018-03-27 09:53:48.469841 mon.a mon.0 172.21.15.144:6789/0 112 : cluster [WRN] Health check failed: 1 slow ops, oldest one blocked for 31 sec (SLOW_OPS)" in cluster log

pass 2327905 2018-03-27 08:32:56 2018-03-27 09:43:53 2018-03-27 10:11:53 0:28:00 0:21:53 0:06:07 smithi master
pass 2327906 2018-03-27 08:32:57 2018-03-27 09:43:55 2018-03-27 10:01:54 0:17:59 0:10:45 0:07:14 smithi master
pass 2327907 2018-03-27 08:32:58 2018-03-27 09:44:06 2018-03-27 10:20:06 0:36:00 0:24:41 0:11:19 smithi master
pass 2327908 2018-03-27 08:32:58 2018-03-27 09:45:34 2018-03-27 10:09:33 0:23:59 0:18:22 0:05:37 smithi master
fail 2327909 2018-03-27 08:32:59 2018-03-27 09:46:00 2018-03-27 10:11:59 0:25:59 0:19:17 0:06:42 smithi master
Failure Reason:

"2018-03-27 10:03:45.086738 mon.b mon.0 172.21.15.36:6789/0 1710 : cluster [WRN] Health check failed: 3 slow ops, oldest one blocked for 34 sec (SLOW_OPS)" in cluster log

pass 2327910 2018-03-27 08:33:00 2018-03-27 09:46:05 2018-03-27 10:08:04 0:21:59 0:14:34 0:07:25 smithi master
pass 2327911 2018-03-27 08:33:00 2018-03-27 09:46:15 2018-03-27 10:04:14 0:17:59 0:06:49 0:11:10 smithi master
pass 2327912 2018-03-27 08:33:01 2018-03-27 09:47:47 2018-03-27 10:01:47 0:14:00 0:08:58 0:05:02 smithi master
pass 2327913 2018-03-27 08:33:02 2018-03-27 09:47:48 2018-03-27 10:27:47 0:39:59 0:28:19 0:11:40 smithi master
pass 2327914 2018-03-27 08:33:02 2018-03-27 09:47:48 2018-03-27 10:27:48 0:40:00 0:25:22 0:14:38 smithi master
pass 2327915 2018-03-27 08:33:05 2018-03-27 09:47:48 2018-03-27 10:25:47 0:37:59 0:22:00 0:15:59 smithi master centos
pass 2327916 2018-03-27 08:33:07 2018-03-27 09:47:53 2018-03-27 10:27:53 0:40:00 0:33:30 0:06:30 smithi master
pass 2327917 2018-03-27 08:33:10 2018-03-27 09:48:08 2018-03-27 12:00:10 2:12:02 2:06:44 0:05:18 smithi master
pass 2327918 2018-03-27 08:33:11 2018-03-27 09:49:41 2018-03-27 10:01:39 0:11:58 0:06:05 0:05:53 smithi master
pass 2327919 2018-03-27 08:33:11 2018-03-27 09:49:41 2018-03-27 10:11:40 0:21:59 0:10:54 0:11:05 smithi master
pass 2327920 2018-03-27 08:33:12 2018-03-27 09:49:41 2018-03-27 10:09:40 0:19:59 0:11:48 0:08:11 smithi master
pass 2327921 2018-03-27 08:33:13 2018-03-27 09:49:41 2018-03-27 10:11:40 0:21:59 0:13:44 0:08:15 smithi master
pass 2327922 2018-03-27 08:33:14 2018-03-27 09:49:41 2018-03-27 10:01:40 0:11:59 0:06:35 0:05:24 smithi master
pass 2327923 2018-03-27 08:33:14 2018-03-27 09:49:47 2018-03-27 10:11:46 0:21:59 0:14:15 0:07:44 smithi master
pass 2327924 2018-03-27 08:33:15 2018-03-27 09:50:01 2018-03-27 10:18:01 0:28:00 0:17:09 0:10:51 smithi master
pass 2327925 2018-03-27 08:33:16 2018-03-27 09:50:07 2018-03-27 10:10:07 0:20:00 0:12:36 0:07:24 smithi master
pass 2327926 2018-03-27 08:33:16 2018-03-27 09:50:57 2018-03-27 10:22:57 0:32:00 0:26:36 0:05:24 smithi master
pass 2327927 2018-03-27 08:33:17 2018-03-27 09:51:32 2018-03-27 10:13:31 0:21:59 0:12:05 0:09:54 smithi master
pass 2327928 2018-03-27 08:33:18 2018-03-27 09:51:34 2018-03-27 10:13:33 0:21:59 0:13:46 0:08:13 smithi master
pass 2327929 2018-03-27 08:33:18 2018-03-27 09:51:46 2018-03-27 10:27:45 0:35:59 0:27:47 0:08:12 smithi master
pass 2327930 2018-03-27 08:33:19 2018-03-27 09:52:07 2018-03-27 10:08:06 0:15:59 0:09:41 0:06:18 smithi master
pass 2327931 2018-03-27 08:33:20 2018-03-27 09:53:36 2018-03-27 10:23:36 0:30:00 0:22:13 0:07:47 smithi master
pass 2327932 2018-03-27 08:33:20 2018-03-27 09:53:36 2018-03-27 10:11:35 0:17:59 0:11:12 0:06:47 smithi master
pass 2327933 2018-03-27 08:33:21 2018-03-27 09:53:36 2018-03-27 10:13:36 0:20:00 0:09:52 0:10:08 smithi master
pass 2327934 2018-03-27 08:33:22 2018-03-27 09:53:54 2018-03-27 10:09:52 0:15:58 0:09:57 0:06:01 smithi master
pass 2327935 2018-03-27 08:33:23 2018-03-27 09:53:56 2018-03-27 10:09:55 0:15:59 0:10:19 0:05:40 smithi master
pass 2327936 2018-03-27 08:33:23 2018-03-27 09:53:56 2018-03-27 10:21:56 0:28:00 0:20:14 0:07:46 smithi master
pass 2327937 2018-03-27 08:33:24 2018-03-27 09:55:24 2018-03-27 10:09:24 0:14:00 0:08:32 0:05:28 smithi master
pass 2327938 2018-03-27 08:33:25 2018-03-27 09:55:34 2018-03-27 10:25:33 0:29:59 0:23:53 0:06:06 smithi master