Status Job ID Links Posted Started Updated
Runtime
Duration
In Waiting
Machine Teuthology Branch OS Type OS Version
pass 2566547 2018-05-22 16:49:41 2018-05-22 18:40:38 2018-05-22 19:02:37 0:21:59 0:08:52 0:13:07 smithi master
pass 2566549 2018-05-22 16:49:42 2018-05-22 18:41:17 2018-05-22 18:57:17 0:16:00 0:06:17 0:09:43 smithi master
pass 2566551 2018-05-22 16:49:43 2018-05-22 18:41:56 2018-05-22 19:05:56 0:24:00 0:09:48 0:14:12 smithi master
pass 2566553 2018-05-22 16:49:45 2018-05-22 18:42:27 2018-05-22 20:00:28 1:18:01 1:01:28 0:16:33 smithi master
pass 2566556 2018-05-22 16:49:46 2018-05-22 18:42:30 2018-05-22 20:00:30 1:18:00 1:06:36 0:11:24 smithi master
pass 2566558 2018-05-22 16:49:47 2018-05-22 18:44:25 2018-05-22 19:30:24 0:45:59 0:26:50 0:19:09 smithi master
pass 2566559 2018-05-22 16:49:48 2018-05-22 18:44:25 2018-05-22 18:58:24 0:13:59 0:04:56 0:09:03 smithi master
pass 2566561 2018-05-22 16:49:49 2018-05-22 18:44:25 2018-05-22 19:04:24 0:19:59 0:07:32 0:12:27 smithi master
pass 2566563 2018-05-22 16:49:50 2018-05-22 18:44:42 2018-05-22 19:32:42 0:48:00 0:39:16 0:08:44 smithi master
pass 2566565 2018-05-22 16:49:51 2018-05-22 18:45:55 2018-05-22 19:23:55 0:38:00 0:11:12 0:26:48 smithi master
pass 2566568 2018-05-22 16:49:52 2018-05-22 18:46:24 2018-05-22 19:16:24 0:30:00 0:14:00 0:16:00 smithi master
pass 2566570 2018-05-22 16:49:53 2018-05-22 18:46:40 2018-05-22 19:12:39 0:25:59 0:11:26 0:14:33 smithi master
pass 2566571 2018-05-22 16:49:54 2018-05-22 18:48:09 2018-05-22 19:02:08 0:13:59 0:05:33 0:08:26 smithi master
pass 2566574 2018-05-22 16:49:55 2018-05-22 18:49:42 2018-05-22 19:21:42 0:32:00 0:18:30 0:13:30 smithi master
pass 2566576 2018-05-22 16:49:56 2018-05-22 18:51:20 2018-05-22 20:25:21 1:34:01 1:17:29 0:16:32 smithi master
pass 2566578 2018-05-22 16:49:57 2018-05-22 18:51:52 2018-05-22 19:23:52 0:32:00 0:14:21 0:17:39 smithi master
pass 2566580 2018-05-22 16:49:58 2018-05-22 18:51:56 2018-05-22 19:17:56 0:26:00 0:14:11 0:11:49 smithi master
pass 2566582 2018-05-22 16:49:59 2018-05-22 18:52:12 2018-05-22 19:06:11 0:13:59 0:05:35 0:08:24 smithi master
pass 2566584 2018-05-22 16:50:00 2018-05-22 18:52:15 2018-05-22 19:20:14 0:27:59 0:15:03 0:12:56 smithi master
pass 2566586 2018-05-22 16:50:01 2018-05-22 18:52:40 2018-05-22 19:28:39 0:35:59 0:23:12 0:12:47 smithi master
pass 2566588 2018-05-22 16:50:02 2018-05-22 18:54:11 2018-05-22 19:12:11 0:18:00 0:07:19 0:10:41 smithi master
pass 2566589 2018-05-22 16:50:02 2018-05-22 18:54:54 2018-05-22 19:26:53 0:31:59 0:15:10 0:16:49 smithi master
pass 2566591 2018-05-22 16:50:03 2018-05-22 18:54:55 2018-05-22 19:10:54 0:15:59 0:05:34 0:10:25 smithi master
pass 2566593 2018-05-22 16:50:04 2018-05-22 18:55:33 2018-05-22 19:43:33 0:48:00 0:31:22 0:16:38 smithi master
pass 2566595 2018-05-22 16:50:05 2018-05-22 18:55:57 2018-05-22 19:33:57 0:38:00 0:13:45 0:24:15 smithi master
pass 2566597 2018-05-22 16:50:06 2018-05-22 18:55:59 2018-05-22 19:33:59 0:38:00 0:10:37 0:27:23 smithi master
pass 2566599 2018-05-22 16:50:07 2018-05-22 18:56:07 2018-05-22 19:20:07 0:24:00 0:14:43 0:09:17 smithi master
pass 2566601 2018-05-22 16:50:07 2018-05-22 18:57:06 2018-05-22 22:27:09 3:30:03 2:44:19 0:45:44 smithi master
pass 2566603 2018-05-22 16:50:08 2018-05-22 18:57:18 2018-05-22 19:13:17 0:15:59 0:05:35 0:10:24 smithi master
pass 2566605 2018-05-22 16:50:09 2018-05-22 18:58:35 2018-05-22 19:24:34 0:25:59 0:11:43 0:14:16 smithi master
pass 2566607 2018-05-22 16:50:10 2018-05-22 18:58:35 2018-05-22 19:12:34 0:13:59 0:05:34 0:08:25 smithi master
pass 2566609 2018-05-22 16:50:11 2018-05-22 18:58:52 2018-05-22 19:24:51 0:25:59 0:12:26 0:13:33 smithi master
pass 2566611 2018-05-22 16:50:12 2018-05-22 19:01:17 2018-05-22 20:11:17 1:10:00 0:26:33 0:43:27 smithi master
pass 2566613 2018-05-22 16:50:13 2018-05-22 19:01:24 2018-05-22 19:35:23 0:33:59 0:19:51 0:14:08 smithi master
pass 2566615 2018-05-22 16:50:14 2018-05-22 19:01:48 2018-05-22 19:15:47 0:13:59 0:05:15 0:08:44 smithi master
pass 2566618 2018-05-22 16:50:15 2018-05-22 19:02:06 2018-05-22 19:40:06 0:38:00 0:14:35 0:23:25 smithi master
pass 2566620 2018-05-22 16:50:16 2018-05-22 19:02:09 2018-05-22 19:28:09 0:26:00 0:14:57 0:11:03 smithi master
pass 2566622 2018-05-22 16:50:17 2018-05-22 19:02:30 2018-05-22 19:34:30 0:32:00 0:22:17 0:09:43 smithi master
pass 2566624 2018-05-22 16:50:18 2018-05-22 19:02:31 2018-05-22 19:48:30 0:45:59 0:16:02 0:29:57 smithi master
pass 2566626 2018-05-22 16:50:19 2018-05-22 19:02:32 2018-05-22 19:44:32 0:42:00 0:15:03 0:26:57 smithi master
pass 2566628 2018-05-22 16:50:19 2018-05-22 19:02:38 2018-05-22 19:20:38 0:18:00 0:08:35 0:09:25 smithi master
pass 2566630 2018-05-22 16:50:20 2018-05-22 19:04:22 2018-05-22 20:02:22 0:58:00 0:16:19 0:41:41 smithi master
pass 2566632 2018-05-22 16:50:21 2018-05-22 19:04:25 2018-05-22 20:44:26 1:40:01 1:21:49 0:18:12 smithi master
pass 2566634 2018-05-22 16:50:22 2018-05-22 19:04:40 2018-05-22 19:20:39 0:15:59 0:06:15 0:09:44 smithi master
pass 2566636 2018-05-22 16:50:23 2018-05-22 19:06:08 2018-05-22 19:24:07 0:17:59 0:09:11 0:08:48 smithi master
pass 2566638 2018-05-22 16:50:24 2018-05-22 19:06:12 2018-05-22 20:06:12 1:00:00 0:31:21 0:28:39 smithi master
pass 2566640 2018-05-22 16:50:25 2018-05-22 19:06:32 2018-05-22 19:42:32 0:36:00 0:11:01 0:24:59 smithi master
pass 2566642 2018-05-22 16:50:25 2018-05-22 19:10:31 2018-05-22 20:10:32 1:00:01 0:34:48 0:25:13 smithi master
pass 2566644 2018-05-22 16:50:26 2018-05-22 19:10:55 2018-05-22 19:34:55 0:24:00 0:13:22 0:10:38 smithi master
pass 2566646 2018-05-22 16:50:27 2018-05-22 19:11:56 2018-05-22 19:35:56 0:24:00 0:11:14 0:12:46 smithi master
pass 2566648 2018-05-22 16:50:28 2018-05-22 19:12:12 2018-05-22 20:16:12 1:04:00 0:17:05 0:46:55 smithi master
pass 2566650 2018-05-22 16:50:29 2018-05-22 19:12:21 2018-05-22 19:28:20 0:15:59 0:05:52 0:10:07 smithi master
pass 2566652 2018-05-22 16:50:30 2018-05-22 19:12:35 2018-05-22 19:50:35 0:38:00 0:11:40 0:26:20 smithi master
pass 2566654 2018-05-22 16:50:31 2018-05-22 19:12:40 2018-05-22 19:54:40 0:42:00 0:21:56 0:20:04 smithi master
pass 2566656 2018-05-22 16:50:32 2018-05-22 19:13:30 2018-05-22 19:37:29 0:23:59 0:13:54 0:10:05 smithi master
pass 2566658 2018-05-22 16:50:33 2018-05-22 19:15:45 2018-05-22 21:33:47 2:18:02 2:01:26 0:16:36 smithi master
pass 2566660 2018-05-22 16:50:34 2018-05-22 19:15:48 2018-05-22 19:55:48 0:40:00 0:15:20 0:24:40 smithi master
pass 2566662 2018-05-22 16:50:34 2018-05-22 19:16:33 2018-05-22 19:40:32 0:23:59 0:13:17 0:10:42 smithi master
pass 2566664 2018-05-22 16:50:35 2018-05-22 19:16:33 2018-05-22 19:34:32 0:17:59 0:05:33 0:12:26 smithi master
pass 2566666 2018-05-22 16:50:36 2018-05-22 19:18:07 2018-05-22 19:38:06 0:19:59 0:08:58 0:11:01 smithi master
pass 2566668 2018-05-22 16:50:37 2018-05-22 19:19:17 2018-05-22 19:47:17 0:28:00 0:15:05 0:12:55 smithi master
pass 2566670 2018-05-22 16:50:38 2018-05-22 19:20:08 2018-05-22 20:06:08 0:46:00 0:25:40 0:20:20 smithi master
pass 2566672 2018-05-22 16:50:39 2018-05-22 19:20:25 2018-05-22 19:50:25 0:30:00 0:15:09 0:14:51 smithi master
pass 2566674 2018-05-22 16:50:40 2018-05-22 19:20:39 2018-05-22 20:16:39 0:56:00 0:33:20 0:22:40 smithi master
pass 2566676 2018-05-22 16:50:41 2018-05-22 19:20:39 2018-05-22 20:08:39 0:48:00 0:22:05 0:25:55 smithi master
pass 2566678 2018-05-22 16:50:42 2018-05-22 19:20:40 2018-05-22 19:42:40 0:22:00 0:10:40 0:11:20 smithi master
pass 2566680 2018-05-22 16:50:43 2018-05-22 19:21:53 2018-05-22 19:41:52 0:19:59 0:09:33 0:10:26 smithi master
pass 2566682 2018-05-22 16:50:44 2018-05-22 19:22:09 2018-05-22 19:56:09 0:34:00 0:11:17 0:22:43 smithi master
pass 2566684 2018-05-22 16:50:45 2018-05-22 19:24:02 2018-05-22 20:00:01 0:35:59 0:25:39 0:10:20 smithi master
pass 2566686 2018-05-22 16:50:46 2018-05-22 19:24:02 2018-05-22 19:48:01 0:23:59 0:13:05 0:10:54 smithi master
pass 2566688 2018-05-22 16:50:47 2018-05-22 19:24:08 2018-05-22 19:52:08 0:28:00 0:17:30 0:10:30 smithi master
pass 2566690 2018-05-22 16:50:48 2018-05-22 19:24:40 2018-05-22 20:52:41 1:28:01 1:01:14 0:26:47 smithi master
pass 2566692 2018-05-22 16:50:49 2018-05-22 19:24:53 2018-05-22 20:24:53 1:00:00 0:11:16 0:48:44 smithi master
pass 2566694 2018-05-22 16:50:49 2018-05-22 19:26:21 2018-05-22 20:06:21 0:40:00 0:11:58 0:28:02 smithi master
pass 2566696 2018-05-22 16:50:50 2018-05-22 19:26:52 2018-05-22 20:06:52 0:40:00 0:27:31 0:12:29 smithi master
pass 2566698 2018-05-22 16:50:51 2018-05-22 19:26:54 2018-05-22 19:40:54 0:14:00 0:05:53 0:08:07 smithi master
pass 2566700 2018-05-22 16:50:52 2018-05-22 19:28:07 2018-05-22 20:02:06 0:33:59 0:20:05 0:13:54 smithi master
pass 2566702 2018-05-22 16:50:53 2018-05-22 19:28:10 2018-05-22 19:44:09 0:15:59 0:05:44 0:10:15 smithi master
pass 2566704 2018-05-22 16:50:54 2018-05-22 19:28:21 2018-05-22 20:12:21 0:44:00 0:14:39 0:29:21 smithi master
pass 2566706 2018-05-22 16:50:55 2018-05-22 19:28:41 2018-05-22 19:50:40 0:21:59 0:11:09 0:10:50 smithi master
pass 2566708 2018-05-22 16:50:55 2018-05-22 19:30:26 2018-05-22 20:10:25 0:39:59 0:24:37 0:15:22 smithi master
pass 2566710 2018-05-22 16:50:56 2018-05-22 19:30:26 2018-05-22 19:46:25 0:15:59 0:05:58 0:10:01 smithi master
pass 2566712 2018-05-22 16:50:57 2018-05-22 19:30:27 2018-05-22 20:02:27 0:32:00 0:16:15 0:15:45 smithi master
pass 2566714 2018-05-22 16:50:58 2018-05-22 19:30:27 2018-05-22 19:46:27 0:16:00 0:08:19 0:07:41 smithi master
pass 2566716 2018-05-22 16:50:59 2018-05-22 19:32:02 2018-05-22 20:14:02 0:42:00 0:15:21 0:26:39 smithi master
pass 2566718 2018-05-22 16:51:00 2018-05-22 19:32:22 2018-05-22 22:04:24 2:32:02 2:14:23 0:17:39 smithi master
pass 2566720 2018-05-22 16:51:01 2018-05-22 19:32:43 2018-05-22 20:16:43 0:44:00 0:31:32 0:12:28 smithi master
pass 2566722 2018-05-22 16:51:02 2018-05-22 19:34:10 2018-05-22 20:00:09 0:25:59 0:10:23 0:15:36 smithi master
pass 2566724 2018-05-22 16:51:03 2018-05-22 19:34:10 2018-05-22 21:30:11 1:56:01 1:38:32 0:17:29 smithi master
fail 2566726 2018-05-22 16:51:03 2018-05-22 19:34:20 2018-05-22 20:20:20 0:46:00 0:28:01 0:17:59 smithi master
Failure Reason:

"2018-05-22 20:13:09.555105 osd.2 172.21.15.131:6804/11174 1 : cluster [WRN] 45 slow requests, 5 included below; oldest blocked for > 30.536959 secs" in cluster log

pass 2566728 2018-05-22 16:51:04 2018-05-22 19:34:27 2018-05-22 20:02:26 0:27:59 0:17:13 0:10:46 smithi master
pass 2566730 2018-05-22 16:51:05 2018-05-22 19:34:31 2018-05-22 19:50:31 0:16:00 0:06:02 0:09:58 smithi master
pass 2566732 2018-05-22 16:51:06 2018-05-22 19:34:33 2018-05-22 20:18:33 0:44:00 0:10:57 0:33:03 smithi master
pass 2566734 2018-05-22 16:51:07 2018-05-22 19:34:56 2018-05-22 19:50:55 0:15:59 0:06:15 0:09:44 smithi master
pass 2566736 2018-05-22 16:51:08 2018-05-22 19:35:01 2018-05-22 20:15:01 0:40:00 0:22:09 0:17:51 smithi master
pass 2566738 2018-05-22 16:51:09 2018-05-22 19:35:24 2018-05-22 20:15:23 0:39:59 0:11:09 0:28:50 smithi master
pass 2566740 2018-05-22 16:51:10 2018-05-22 19:35:24 2018-05-22 19:53:24 0:18:00 0:06:44 0:11:16 smithi master
pass 2566742 2018-05-22 16:51:11 2018-05-22 19:35:57 2018-05-22 20:13:56 0:37:59 0:22:12 0:15:47 smithi master
pass 2566744 2018-05-22 16:51:12 2018-05-22 19:36:32 2018-05-22 21:34:33 1:58:01 1:36:32 0:21:29 smithi master
pass 2566746 2018-05-22 16:51:12 2018-05-22 20:12:12 2018-05-22 20:26:12 0:14:00 0:05:35 0:08:25 smithi master
pass 2566748 2018-05-22 16:51:13 2018-05-22 20:12:13 2018-05-22 20:40:13 0:28:00 0:14:35 0:13:25 smithi master
pass 2566750 2018-05-22 16:51:14 2018-05-22 20:12:22 2018-05-22 20:36:22 0:24:00 0:15:16 0:08:44 smithi master ubuntu
pass 2566752 2018-05-22 16:51:15 2018-05-22 20:12:45 2018-05-22 20:34:45 0:22:00 0:13:17 0:08:43 smithi master
pass 2566754 2018-05-22 16:51:16 2018-05-22 20:15:25 2018-05-22 20:43:24 0:27:59 0:15:05 0:12:54 smithi master
pass 2566756 2018-05-22 16:51:17 2018-05-22 20:15:25 2018-05-22 20:49:25 0:34:00 0:21:45 0:12:15 smithi master
pass 2566758 2018-05-22 16:51:18 2018-05-22 20:16:03 2018-05-22 20:44:03 0:28:00 0:15:23 0:12:37 smithi master
pass 2566760 2018-05-22 16:51:19 2018-05-22 20:16:13 2018-05-22 20:30:12 0:13:59 0:05:59 0:08:00 smithi master
pass 2566762 2018-05-22 16:51:19 2018-05-22 20:16:15 2018-05-22 20:32:14 0:15:59 0:06:27 0:09:32 smithi master
pass 2566764 2018-05-22 16:51:20 2018-05-22 20:16:52 2018-05-22 21:00:51 0:43:59 0:31:36 0:12:23 smithi master
pass 2566766 2018-05-22 16:51:21 2018-05-22 20:16:52 2018-05-22 20:54:51 0:37:59 0:14:39 0:23:20 smithi master
pass 2566768 2018-05-22 16:51:22 2018-05-22 20:18:36 2018-05-22 20:42:35 0:23:59 0:10:22 0:13:37 smithi master
fail 2566770 2018-05-22 16:51:23 2018-05-22 20:18:37 2018-05-22 20:46:36 0:27:59 0:14:45 0:13:14 smithi master
Failure Reason:

"2018-05-22 20:41:00.757532 osd.2 172.21.15.131:6808/11109 1 : cluster [WRN] 1 slow requests, 1 included below; oldest blocked for > 30.475552 secs" in cluster log

pass 2566772 2018-05-22 16:51:24 2018-05-22 20:20:10 2018-05-22 22:56:12 2:36:02 2:20:55 0:15:07 smithi master
pass 2566774 2018-05-22 16:51:24 2018-05-22 20:20:21 2018-05-22 20:44:21 0:24:00 0:11:29 0:12:31 smithi master
pass 2566776 2018-05-22 16:51:25 2018-05-22 20:22:27 2018-05-22 20:36:26 0:13:59 0:06:01 0:07:58 smithi master
pass 2566778 2018-05-22 16:51:26 2018-05-22 20:22:42 2018-05-22 20:38:41 0:15:59 0:05:44 0:10:15 smithi master
pass 2566780 2018-05-22 16:51:27 2018-05-22 20:24:28 2018-05-22 20:48:27 0:23:59 0:11:46 0:12:13 smithi master
pass 2566782 2018-05-22 16:51:27 2018-05-22 20:24:54 2018-05-22 20:54:54 0:30:00 0:17:48 0:12:12 smithi master
pass 2566784 2018-05-22 16:51:28 2018-05-22 20:25:25 2018-05-22 20:59:24 0:33:59 0:21:31 0:12:28 smithi master
pass 2566786 2018-05-22 16:51:29 2018-05-22 20:26:10 2018-05-22 20:50:09 0:23:59 0:14:11 0:09:48 smithi master
pass 2566788 2018-05-22 16:51:30 2018-05-22 20:26:13 2018-05-22 20:54:12 0:27:59 0:14:55 0:13:04 smithi master
pass 2566790 2018-05-22 16:51:31 2018-05-22 20:26:35 2018-05-22 20:48:34 0:21:59 0:06:38 0:15:21 smithi master ubuntu
pass 2566792 2018-05-22 16:51:31 2018-05-22 20:28:10 2018-05-22 20:54:10 0:26:00 0:14:26 0:11:34 smithi master
pass 2566794 2018-05-22 16:51:32 2018-05-22 20:28:21 2018-05-22 20:44:20 0:15:59 0:06:39 0:09:20 smithi master
pass 2566796 2018-05-22 16:51:33 2018-05-22 20:30:19 2018-05-22 21:04:19 0:34:00 0:15:08 0:18:52 smithi master
pass 2566798 2018-05-22 16:51:34 2018-05-22 20:30:19 2018-05-22 21:04:19 0:34:00 0:15:18 0:18:42 smithi master
pass 2566800 2018-05-22 16:51:35 2018-05-22 20:30:21 2018-05-22 22:26:22 1:56:01 1:38:00 0:18:01 smithi master
pass 2566802 2018-05-22 16:51:35 2018-05-22 20:32:23 2018-05-22 21:22:23 0:50:00 0:30:33 0:19:27 smithi master
pass 2566804 2018-05-22 16:51:36 2018-05-22 20:32:23 2018-05-22 20:52:23 0:20:00 0:09:45 0:10:15 smithi master
pass 2566806 2018-05-22 16:51:37 2018-05-22 20:32:23 2018-05-22 20:50:22 0:17:59 0:07:11 0:10:48 smithi master
pass 2566808 2018-05-22 16:51:38 2018-05-22 20:33:17 2018-05-22 21:13:17 0:40:00 0:12:24 0:27:36 smithi master
fail 2566810 2018-05-22 16:51:39 2018-05-22 20:34:13 2018-05-22 21:52:13 1:18:00 1:07:03 0:10:57 smithi master
Failure Reason:

Command failed on smithi191 with status 11: 'sudo adjust-ulimits ceph-coverage /home/ubuntu/cephtest/archive/coverage ceph --cluster cluster2 osd deep-scrub 1'

pass 2566812 2018-05-22 16:51:39 2018-05-22 20:34:46 2018-05-22 21:28:46 0:54:00 0:34:26 0:19:34 smithi master
pass 2566814 2018-05-22 16:51:40 2018-05-22 20:36:33 2018-05-22 20:52:32 0:15:59 0:05:26 0:10:33 smithi master
pass 2566816 2018-05-22 16:51:41 2018-05-22 20:36:33 2018-05-22 20:56:32 0:19:59 0:06:29 0:13:30 smithi master
pass 2566818 2018-05-22 16:51:42 2018-05-22 20:38:26 2018-05-22 21:10:26 0:32:00 0:17:42 0:14:18 smithi master
pass 2566820 2018-05-22 16:51:42 2018-05-22 20:38:33 2018-05-22 21:50:33 1:12:00 0:10:46 1:01:14 smithi master
pass 2566822 2018-05-22 16:51:43 2018-05-22 20:38:42 2018-05-22 21:04:42 0:26:00 0:11:35 0:14:25 smithi master
pass 2566824 2018-05-22 16:51:44 2018-05-22 20:40:12 2018-05-22 21:18:11 0:37:59 0:12:25 0:25:34 smithi master
pass 2566826 2018-05-22 16:51:45 2018-05-22 20:40:13 2018-05-22 20:54:12 0:13:59 0:05:36 0:08:23 smithi master
pass 2566828 2018-05-22 16:51:45 2018-05-22 20:40:14 2018-05-22 21:14:14 0:34:00 0:20:22 0:13:38 smithi master
pass 2566830 2018-05-22 16:51:46 2018-05-22 20:41:56 2018-05-23 00:07:59 3:26:03 3:14:08 0:11:55 smithi master
pass 2566832 2018-05-22 16:51:47 2018-05-22 20:42:17 2018-05-22 21:42:17 1:00:00 0:15:35 0:44:25 smithi master
pass 2566834 2018-05-22 16:51:48 2018-05-22 20:42:36 2018-05-22 21:08:36 0:26:00 0:14:55 0:11:05 smithi master
pass 2566836 2018-05-22 16:51:49 2018-05-22 20:43:28 2018-05-22 20:57:28 0:14:00 0:06:00 0:08:00 smithi master
pass 2566838 2018-05-22 16:51:49 2018-05-22 20:44:04 2018-05-22 21:50:04 1:06:00 0:15:24 0:50:36 smithi master
pass 2566840 2018-05-22 16:51:50 2018-05-22 20:44:11 2018-05-22 21:16:11 0:32:00 0:18:38 0:13:22 smithi master
pass 2566842 2018-05-22 16:51:51 2018-05-22 20:44:21 2018-05-22 21:00:21 0:16:00 0:07:00 0:09:00 smithi master
pass 2566844 2018-05-22 16:51:52 2018-05-22 20:44:22 2018-05-22 21:14:21 0:29:59 0:15:32 0:14:27 smithi master
pass 2566846 2018-05-22 16:51:52 2018-05-22 20:44:27 2018-05-22 21:04:26 0:19:59 0:11:20 0:08:39 smithi master
pass 2566848 2018-05-22 16:51:53 2018-05-22 20:44:43 2018-05-22 21:30:43 0:46:00 0:31:58 0:14:02 smithi master
pass 2566850 2018-05-22 16:51:54 2018-05-22 20:46:47 2018-05-22 21:44:47 0:58:00 0:10:36 0:47:24 smithi master
pass 2566852 2018-05-22 16:51:55 2018-05-22 20:48:41 2018-05-22 21:26:40 0:37:59 0:10:33 0:27:26 smithi master
pass 2566854 2018-05-22 16:51:56 2018-05-22 20:48:41 2018-05-22 21:14:40 0:25:59 0:12:22 0:13:37 smithi master
pass 2566856 2018-05-22 16:51:56 2018-05-22 20:48:41 2018-05-22 22:30:42 1:42:01 1:14:37 0:27:24 smithi master
pass 2566858 2018-05-22 16:51:57 2018-05-22 20:48:44 2018-05-22 21:02:44 0:14:00 0:05:34 0:08:26 smithi master
pass 2566860 2018-05-22 16:51:58 2018-05-22 20:49:26 2018-05-22 21:15:25 0:25:59 0:10:52 0:15:07 smithi master
pass 2566862 2018-05-22 16:51:59 2018-05-22 20:50:12 2018-05-22 21:06:11 0:15:59 0:05:53 0:10:06 smithi master
pass 2566864 2018-05-22 16:51:59 2018-05-22 20:50:24 2018-05-22 21:24:23 0:33:59 0:12:31 0:21:28 smithi master
pass 2566866 2018-05-22 16:52:00 2018-05-22 20:50:29 2018-05-22 21:24:29 0:34:00 0:19:26 0:14:34 smithi master
pass 2566868 2018-05-22 16:52:01 2018-05-22 20:50:52 2018-05-22 21:24:52 0:34:00 0:22:10 0:11:50 smithi master
pass 2566870 2018-05-22 16:52:02 2018-05-22 20:52:25 2018-05-22 21:08:24 0:15:59 0:05:37 0:10:22 smithi master
pass 2566872 2018-05-22 16:52:03 2018-05-22 20:52:29 2018-05-22 21:24:29 0:32:00 0:15:29 0:16:31 smithi master
pass 2566874 2018-05-22 16:52:03 2018-05-22 20:52:33 2018-05-22 21:18:32 0:25:59 0:14:56 0:11:03 smithi master
pass 2566876 2018-05-22 16:52:04 2018-05-22 20:52:33 2018-05-22 21:24:33 0:32:00 0:22:07 0:09:53 smithi master
pass 2566878 2018-05-22 16:52:05 2018-05-22 20:52:51 2018-05-22 21:38:51 0:46:00 0:10:03 0:35:57 smithi master
pass 2566880 2018-05-22 16:52:06 2018-05-22 20:53:26 2018-05-22 21:21:26 0:28:00 0:15:48 0:12:12 smithi master
pass 2566882 2018-05-22 16:52:07 2018-05-22 20:53:28 2018-05-22 21:07:28 0:14:00 0:04:35 0:09:25 smithi master
pass 2566884 2018-05-22 16:52:07 2018-05-22 20:54:11 2018-05-22 21:26:11 0:32:00 0:15:16 0:16:44 smithi master
pass 2566886 2018-05-22 16:52:08 2018-05-22 20:54:14 2018-05-23 00:20:17 3:26:03 2:55:36 0:30:27 smithi master
pass 2566888 2018-05-22 16:52:09 2018-05-22 20:54:14 2018-05-22 21:10:13 0:15:59 0:05:51 0:10:08 smithi master
pass 2566890 2018-05-22 16:52:10 2018-05-22 20:54:54 2018-05-22 21:12:53 0:17:59 0:08:35 0:09:24 smithi master
pass 2566891 2018-05-22 16:52:11 2018-05-22 20:54:55 2018-05-22 22:18:55 1:24:00 0:31:02 0:52:58 smithi master
pass 2566893 2018-05-22 16:52:11 2018-05-22 20:56:07 2018-05-22 21:46:07 0:50:00 0:10:43 0:39:17 smithi master
pass 2566896 2018-05-22 16:52:12 2018-05-22 20:56:11 2018-05-22 22:00:12 1:04:01 0:52:15 0:11:46 smithi master
pass 2566898 2018-05-22 16:52:13 2018-05-22 20:56:33 2018-05-22 21:38:33 0:42:00 0:22:18 0:19:42 smithi master
pass 2566900 2018-05-22 16:52:14 2018-05-22 20:57:39 2018-05-22 21:21:38 0:23:59 0:12:32 0:11:27 smithi master
pass 2566902 2018-05-22 16:52:15 2018-05-22 20:59:39 2018-05-22 21:37:39 0:38:00 0:10:59 0:27:01 smithi master
pass 2566903 2018-05-22 16:52:15 2018-05-22 21:24:26 2018-05-22 21:52:25 0:27:59 0:10:41 0:17:18 smithi master
pass 2566905 2018-05-22 16:52:16 2018-05-22 21:24:30 2018-05-22 21:40:29 0:15:59 0:06:40 0:09:19 smithi master
pass 2566907 2018-05-22 16:52:17 2018-05-22 21:24:30 2018-05-22 21:48:30 0:24:00 0:11:56 0:12:04 smithi master
pass 2566909 2018-05-22 16:52:18 2018-05-22 21:24:34 2018-05-22 21:56:34 0:32:00 0:18:22 0:13:38 smithi master
pass 2566911 2018-05-22 16:52:18 2018-05-22 21:24:53 2018-05-22 21:48:53 0:24:00 0:14:52 0:09:08 smithi master
pass 2566913 2018-05-22 16:52:19 2018-05-22 21:26:13 2018-05-22 22:46:14 1:20:01 0:58:40 0:21:21 smithi master
pass 2566915 2018-05-22 16:52:20 2018-05-22 21:26:39 2018-05-22 22:56:39 1:30:00 0:15:21 1:14:39 smithi master
pass 2566917 2018-05-22 16:52:21 2018-05-22 21:26:41 2018-05-22 21:54:41 0:28:00 0:13:23 0:14:37 smithi master
pass 2566919 2018-05-22 16:52:21 2018-05-22 21:27:39 2018-05-22 21:43:38 0:15:59 0:05:36 0:10:23 smithi master
pass 2566921 2018-05-22 16:52:22 2018-05-22 21:28:36 2018-05-22 21:46:35 0:17:59 0:08:51 0:09:08 smithi master
pass 2566923 2018-05-22 16:52:23 2018-05-22 21:28:48 2018-05-22 22:40:49 1:12:01 0:15:32 0:56:29 smithi master
pass 2566925 2018-05-22 16:52:24 2018-05-22 21:30:22 2018-05-22 22:38:22 1:08:00 0:23:38 0:44:22 smithi master
pass 2566927 2018-05-22 16:52:25 2018-05-22 21:30:22 2018-05-22 22:00:22 0:30:00 0:15:33 0:14:27 smithi master
pass 2566929 2018-05-22 16:52:26 2018-05-22 21:30:36 2018-05-22 22:50:37 1:20:01 0:32:57 0:47:04 smithi master
pass 2566931 2018-05-22 16:52:27 2018-05-22 21:30:44 2018-05-22 22:02:44 0:32:00 0:12:42 0:19:18 smithi master
pass 2566933 2018-05-22 16:52:27 2018-05-22 21:32:40 2018-05-22 21:50:39 0:17:59 0:08:56 0:09:03 smithi master
pass 2566935 2018-05-22 16:52:28 2018-05-22 21:32:44 2018-05-22 21:50:43 0:17:59 0:08:45 0:09:14 smithi master
pass 2566937 2018-05-22 16:52:29 2018-05-22 21:33:50 2018-05-22 22:13:50 0:40:00 0:10:58 0:29:02 smithi master
pass 2566939 2018-05-22 16:52:30 2018-05-22 21:34:26 2018-05-22 22:14:26 0:40:00 0:25:55 0:14:05 smithi master
pass 2566941 2018-05-22 16:52:30 2018-05-22 21:34:43 2018-05-22 22:04:42 0:29:59 0:13:02 0:16:57 smithi master
pass 2566943 2018-05-22 16:52:31 2018-05-22 21:35:28 2018-05-22 22:03:28 0:28:00 0:18:15 0:09:45 smithi master
fail 2566945 2018-05-22 16:52:32 2018-05-22 21:36:47 2018-05-23 00:04:48 2:28:01 1:34:44 0:53:17 smithi master
Failure Reason:

Command failed on smithi024 with status 11: 'sudo adjust-ulimits ceph-coverage /home/ubuntu/cephtest/archive/coverage ceph --cluster ceph osd deep-scrub 4'

pass 2566947 2018-05-22 16:52:33 2018-05-22 21:36:53 2018-05-22 22:18:52 0:41:59 0:10:59 0:31:00 smithi master
pass 2566949 2018-05-22 16:52:33 2018-05-22 21:37:40 2018-05-22 22:03:40 0:26:00 0:11:42 0:14:18 smithi master
pass 2566951 2018-05-22 16:52:34 2018-05-22 21:38:26 2018-05-22 22:20:26 0:42:00 0:16:59 0:25:01 smithi master
pass 2566953 2018-05-22 16:52:35 2018-05-22 21:38:35 2018-05-22 21:54:34 0:15:59 0:05:34 0:10:25 smithi master
pass 2566955 2018-05-22 16:52:36 2018-05-22 21:38:54 2018-05-22 22:12:53 0:33:59 0:19:32 0:14:27 smithi master
pass 2566957 2018-05-22 16:52:37 2018-05-22 21:39:00 2018-05-22 21:54:59 0:15:59 0:05:28 0:10:31 smithi master
pass 2566959 2018-05-22 16:52:37 2018-05-22 21:40:23 2018-05-22 22:14:22 0:33:59 0:15:44 0:18:15 smithi master
pass 2566961 2018-05-22 16:52:38 2018-05-22 21:40:30 2018-05-22 22:06:30 0:26:00 0:15:32 0:10:28 smithi master
pass 2566963 2018-05-22 16:52:39 2018-05-22 21:40:35 2018-05-22 22:12:35 0:32:00 0:14:58 0:17:02 smithi master
pass 2566965 2018-05-22 16:52:40 2018-05-22 21:40:59 2018-05-22 21:56:58 0:15:59 0:05:50 0:10:09 smithi master
pass 2566967 2018-05-22 16:52:40 2018-05-22 21:42:20 2018-05-22 22:38:20 0:56:00 0:15:44 0:40:16 smithi master
pass 2566969 2018-05-22 16:52:41 2018-05-22 21:43:40 2018-05-22 22:03:40 0:20:00 0:09:11 0:10:49 smithi master
pass 2566971 2018-05-22 16:52:42 2018-05-22 21:44:25 2018-05-22 22:12:24 0:27:59 0:16:21 0:11:38 smithi master
pass 2566973 2018-05-22 16:52:43 2018-05-22 21:44:50 2018-05-22 23:02:50 1:18:00 0:57:26 0:20:34 smithi master
pass 2566975 2018-05-22 16:52:43 2018-05-22 21:45:39 2018-05-22 22:31:39 0:46:00 0:32:16 0:13:44 smithi master
pass 2566977 2018-05-22 16:52:44 2018-05-22 21:46:09 2018-05-22 22:10:09 0:24:00 0:10:50 0:13:10 smithi master
fail 2566979 2018-05-22 16:52:45 2018-05-22 21:46:22 2018-05-22 22:30:22 0:44:00 0:26:29 0:17:31 smithi master
Failure Reason:

"2018-05-22 22:19:45.328667 osd.3 172.21.15.92:6800/11111 1 : cluster [WRN] 96 slow requests, 5 included below; oldest blocked for > 30.748513 secs" in cluster log

pass 2566981 2018-05-22 16:52:46 2018-05-22 21:46:25 2018-05-22 22:16:24 0:29:59 0:19:15 0:10:44 smithi master
pass 2566983 2018-05-22 16:52:47 2018-05-22 21:46:34 2018-05-22 22:02:33 0:15:59 0:05:49 0:10:10 smithi master
pass 2566985 2018-05-22 16:52:47 2018-05-22 21:46:37 2018-05-22 22:12:36 0:25:59 0:10:53 0:15:06 smithi master
pass 2566987 2018-05-22 16:52:48 2018-05-22 21:46:48 2018-05-22 22:00:47 0:13:59 0:05:15 0:08:44 smithi master
pass 2566989 2018-05-22 16:52:49 2018-05-22 21:46:48 2018-05-22 22:36:48 0:50:00 0:10:09 0:39:51 smithi master
pass 2566991 2018-05-22 16:52:50 2018-05-22 21:46:48 2018-05-22 22:12:47 0:25:59 0:12:47 0:13:12 smithi master
pass 2566993 2018-05-22 16:52:51 2018-05-22 21:47:04 2018-05-22 22:01:04 0:14:00 0:05:27 0:08:33 smithi master
pass 2566995 2018-05-22 16:52:51 2018-05-22 21:48:08 2018-05-22 22:34:07 0:45:59 0:21:12 0:24:47 smithi master
pass 2566997 2018-05-22 16:52:52 2018-05-22 21:48:28 2018-05-23 00:56:31 3:08:03 2:56:13 0:11:50 smithi master
pass 2566999 2018-05-22 16:52:53 2018-05-22 21:48:31 2018-05-22 22:06:30 0:17:59 0:06:46 0:11:13 smithi master
pass 2567001 2018-05-22 16:52:54 2018-05-22 21:48:31 2018-05-22 22:18:31 0:30:00 0:15:18 0:14:42 smithi master
pass 2567003 2018-05-22 16:52:54 2018-05-22 21:48:54 2018-05-22 22:14:53 0:25:59 0:12:45 0:13:14 smithi master ubuntu
pass 2567005 2018-05-22 16:52:55 2018-05-22 21:50:15 2018-05-22 22:16:14 0:25:59 0:15:43 0:10:16 smithi master
fail 2567007 2018-05-22 16:52:56 2018-05-22 21:50:35 2018-05-22 23:00:35 1:10:00 0:15:14 0:54:46 smithi master
Failure Reason:

"2018-05-22 22:59:09.076881 osd.4 172.21.15.167:6804/11001 11 : cluster [WRN] 1 slow requests, 1 included below; oldest blocked for > 30.185562 secs" in cluster log

pass 2567009 2018-05-22 16:52:57 2018-05-22 21:50:41 2018-05-22 22:30:40 0:39:59 0:18:48 0:21:11 smithi master
pass 2567011 2018-05-22 16:52:58 2018-05-22 21:50:44 2018-05-22 22:34:44 0:44:00 0:15:24 0:28:36 smithi master
pass 2567013 2018-05-22 16:52:59 2018-05-22 21:52:25 2018-05-22 22:06:25 0:14:00 0:06:47 0:07:13 smithi master
pass 2567015 2018-05-22 16:52:59 2018-05-22 21:52:26 2018-05-22 22:08:25 0:15:59 0:06:56 0:09:03 smithi master
pass 2567017 2018-05-22 16:53:00 2018-05-22 21:52:26 2018-05-22 22:42:25 0:49:59 0:31:14 0:18:45 smithi master
pass 2567019 2018-05-22 16:53:01 2018-05-22 21:52:26 2018-05-22 22:32:26 0:40:00 0:12:21 0:27:39 smithi master
pass 2567021 2018-05-22 16:53:02 2018-05-22 21:52:29 2018-05-22 22:40:29 0:48:00 0:11:37 0:36:23 smithi master
pass 2567023 2018-05-22 16:53:03 2018-05-22 21:52:51 2018-05-22 22:14:51 0:22:00 0:12:01 0:09:59 smithi master
pass 2567025 2018-05-22 16:53:04 2018-05-22 21:54:42 2018-05-22 23:26:43 1:32:01 1:16:44 0:15:17 smithi master
pass 2567027 2018-05-22 16:53:04 2018-05-22 21:54:42 2018-05-22 22:18:42 0:24:00 0:11:02 0:12:58 smithi master
pass 2567029 2018-05-22 16:53:05 2018-05-22 21:54:42 2018-05-22 22:10:42 0:16:00 0:05:37 0:10:23 smithi master
pass 2567031 2018-05-22 16:53:06 2018-05-22 21:54:43 2018-05-22 22:10:42 0:15:59 0:06:42 0:09:17 smithi master
pass 2567033 2018-05-22 16:53:07 2018-05-22 21:55:00 2018-05-23 00:01:02 2:06:02 0:12:32 1:53:30 smithi master
pass 2567035 2018-05-22 16:53:08 2018-05-22 21:56:50 2018-05-23 00:10:51 2:14:01 0:19:30 1:54:31 smithi master
pass 2567037 2018-05-22 16:53:09 2018-05-22 21:56:51 2018-05-22 22:30:50 0:33:59 0:20:56 0:13:03 smithi master
pass 2567039 2018-05-22 16:53:10 2018-05-22 21:57:00 2018-05-22 22:20:59 0:23:59 0:13:55 0:10:04 smithi master
pass 2567041 2018-05-22 16:53:11 2018-05-22 21:58:16 2018-05-22 22:34:15 0:35:59 0:14:40 0:21:19 smithi master
pass 2567043 2018-05-22 16:53:12 2018-05-22 21:59:56 2018-05-22 22:19:54 0:19:58 0:06:13 0:13:45 smithi master ubuntu
pass 2567045 2018-05-22 16:53:12 2018-05-22 21:59:56 2018-05-22 22:53:55 0:53:59 0:13:53 0:40:06 smithi master
pass 2567047 2018-05-22 16:53:13 2018-05-22 22:00:14 2018-05-22 22:16:12 0:15:58 0:06:08 0:09:50 smithi master
pass 2567049 2018-05-22 16:53:14 2018-05-22 22:00:23 2018-05-22 22:32:23 0:32:00 0:15:01 0:16:59 smithi master
pass 2567051 2018-05-22 16:53:15 2018-05-22 22:00:48 2018-05-22 22:28:48 0:28:00 0:15:36 0:12:24 smithi master
pass 2567053 2018-05-22 16:53:16 2018-05-22 22:01:17 2018-05-23 01:21:20 3:20:03 2:56:04 0:23:59 smithi master
pass 2567055 2018-05-22 16:53:17 2018-05-22 22:02:36 2018-05-22 22:46:35 0:43:59 0:31:10 0:12:49 smithi master