Skip to content

Instantly share code, notes, and snippets.

@aphyr

aphyr/gist:10559903

Last active August 29, 2015 13:59
Show Gist options
  • Save aphyr/10559903 to your computer and use it in GitHub Desktop.
Save aphyr/10559903 to your computer and use it in GitHub Desktop.
Download ZIP
Raw
gistfile1.txt
Testing jepsen.system.elasticsearch-test
INFO jepsen.os.debian - :n1 setting up debian
INFO jepsen.os.debian - :n2 setting up debian
INFO jepsen.os.debian - :n5 setting up debian
INFO jepsen.os.debian - :n3 setting up debian
INFO jepsen.os.debian - :n4 setting up debian
INFO jepsen.os.debian - :n1 debian set up
INFO jepsen.os.debian - :n4 debian set up
INFO jepsen.os.debian - :n2 debian set up
INFO jepsen.os.debian - :n3 debian set up
INFO jepsen.os.debian - :n5 debian set up
INFO jepsen.system.elasticsearch - :n4 elasticsearch nuked
INFO jepsen.system.elasticsearch - :n2 elasticsearch nuked
INFO jepsen.system.elasticsearch - :n1 elasticsearch nuked
INFO jepsen.system.elasticsearch - :n5 elasticsearch nuked
INFO jepsen.system.elasticsearch - :n3 elasticsearch nuked
INFO jepsen.system.elasticsearch - :n5 configuring elasticsearch
INFO jepsen.system.elasticsearch - :n2 configuring elasticsearch
INFO jepsen.system.elasticsearch - :n1 configuring elasticsearch
INFO jepsen.system.elasticsearch - :n3 configuring elasticsearch
INFO jepsen.system.elasticsearch - :n4 configuring elasticsearch
INFO jepsen.system.elasticsearch - :n1 starting elasticsearch
INFO jepsen.system.elasticsearch - :n2 starting elasticsearch
INFO jepsen.system.elasticsearch - :n4 starting elasticsearch
INFO jepsen.system.elasticsearch - :n3 starting elasticsearch
INFO jepsen.system.elasticsearch - :n5 starting elasticsearch
INFO jepsen.system.elasticsearch - :n2 elasticsearch ready
INFO jepsen.system.elasticsearch - :n1 elasticsearch ready
INFO jepsen.system.elasticsearch - :n3 elasticsearch ready
INFO jepsen.system.elasticsearch - :n5 elasticsearch ready
INFO jepsen.system.elasticsearch - :n4 elasticsearch ready
INFO jepsen.core - Worker 1 starting
INFO jepsen.core - Worker 2 starting
INFO jepsen.core - Worker 3 starting
INFO jepsen.core - Worker 4 starting
INFO jepsen.core - Worker 0 starting
INFO jepsen.util - 0 :invoke :add 1
INFO jepsen.util - 2 :invoke :add 2
INFO jepsen.util - 3 :invoke :add 0
INFO jepsen.util - 1 :invoke :add 4
INFO jepsen.util - 4 :invoke :add 3
INFO jepsen.util - 0 :ok :add 1
INFO jepsen.util - 3 :ok :add 0
INFO jepsen.util - 2 :ok :add 2
INFO jepsen.util - 4 :ok :add 3
INFO jepsen.util - 1 :ok :add 4
INFO jepsen.util - 0 :invoke :add 5
INFO jepsen.util - 3 :invoke :add 6
INFO jepsen.util - 4 :invoke :add 8
INFO jepsen.util - 2 :invoke :add 7
INFO jepsen.util - 1 :invoke :add 9
INFO jepsen.util - 0 :ok :add 5
INFO jepsen.util - 2 :ok :add 7
INFO jepsen.util - 3 :ok :add 6
INFO jepsen.util - 4 :ok :add 8
INFO jepsen.util - 1 :ok :add 9
INFO jepsen.util - 0 :invoke :add 10
INFO jepsen.util - 2 :invoke :add 11
INFO jepsen.util - 3 :invoke :add 12
INFO jepsen.util - 4 :invoke :add 13
INFO jepsen.util - 1 :invoke :add 14
INFO jepsen.util - 0 :ok :add 10
INFO jepsen.util - 3 :ok :add 12
INFO jepsen.util - 1 :ok :add 14
INFO jepsen.util - 2 :ok :add 11
INFO jepsen.util - 4 :ok :add 13
INFO jepsen.util - 0 :invoke :add 15
INFO jepsen.util - 3 :invoke :add 16
INFO jepsen.util - 1 :invoke :add 17
INFO jepsen.util - 2 :invoke :add 18
INFO jepsen.util - 4 :invoke :add 19
INFO jepsen.util - 0 :ok :add 15
INFO jepsen.util - 1 :ok :add 17
INFO jepsen.util - 2 :ok :add 18
INFO jepsen.util - 3 :ok :add 16
INFO jepsen.util - 4 :ok :add 19
INFO jepsen.util - 0 :invoke :add 20
INFO jepsen.util - 1 :invoke :add 21
INFO jepsen.util - 2 :invoke :add 22
INFO jepsen.util - 3 :invoke :add 23
INFO jepsen.util - 4 :invoke :add 24
INFO jepsen.util - 2 :ok :add 22
INFO jepsen.util - 4 :ok :add 24
INFO jepsen.util - 1 :ok :add 21
INFO jepsen.util - 0 :ok :add 20
INFO jepsen.util - 3 :ok :add 23
INFO jepsen.util - 2 :invoke :add 25
INFO jepsen.util - 4 :invoke :add 26
INFO jepsen.util - 1 :invoke :add 27
INFO jepsen.util - 0 :invoke :add 28
INFO jepsen.util - 3 :invoke :add 29
INFO jepsen.util - 2 :ok :add 25
INFO jepsen.util - 0 :ok :add 28
INFO jepsen.util - 4 :ok :add 26
INFO jepsen.util - 3 :ok :add 29
INFO jepsen.util - 1 :ok :add 27
INFO jepsen.util - 2 :invoke :add 30
INFO jepsen.util - 0 :invoke :add 31
INFO jepsen.util - 4 :invoke :add 32
INFO jepsen.util - 3 :invoke :add 33
INFO jepsen.util - 1 :invoke :add 34
INFO jepsen.util - 0 :ok :add 31
INFO jepsen.util - 3 :ok :add 33
INFO jepsen.util - 2 :ok :add 30
INFO jepsen.util - 4 :ok :add 32
INFO jepsen.util - 1 :ok :add 34
INFO jepsen.util - 0 :invoke :add 35
INFO jepsen.util - 3 :invoke :add 36
INFO jepsen.util - 2 :invoke :add 37
INFO jepsen.util - 4 :invoke :add 38
INFO jepsen.util - 1 :invoke :add 39
INFO jepsen.util - 0 :ok :add 35
INFO jepsen.util - 3 :ok :add 36
INFO jepsen.util - 1 :ok :add 39
INFO jepsen.util - 2 :ok :add 37
INFO jepsen.util - 4 :ok :add 38
INFO jepsen.util - 0 :invoke :add 40
INFO jepsen.util - 3 :invoke :add 41
INFO jepsen.util - 1 :invoke :add 42
INFO jepsen.util - 4 :invoke :add 43
INFO jepsen.util - 2 :invoke :add 44
INFO jepsen.util - 3 :ok :add 41
INFO jepsen.util - 2 :ok :add 44
INFO jepsen.util - 0 :ok :add 40
INFO jepsen.util - 4 :ok :add 43
INFO jepsen.util - 1 :ok :add 42
INFO jepsen.util - :nemesis :info :start nil
INFO jepsen.util - 3 :invoke :add 45
INFO jepsen.util - 2 :invoke :add 46
INFO jepsen.util - 0 :invoke :add 47
INFO jepsen.util - 4 :invoke :add 48
INFO jepsen.util - 1 :invoke :add 49
INFO jepsen.util - 2 :ok :add 46
INFO jepsen.util - 3 :ok :add 45
INFO jepsen.util - 0 :ok :add 47
INFO jepsen.util - 4 :ok :add 48
INFO jepsen.util - 1 :ok :add 49
INFO jepsen.util - 2 :invoke :add 50
INFO jepsen.util - 3 :invoke :add 51
INFO jepsen.util - 0 :invoke :add 52
INFO jepsen.util - 4 :invoke :add 53
INFO jepsen.util - 1 :invoke :add 54
INFO jepsen.util - 3 :ok :add 51
INFO jepsen.util - 2 :ok :add 50
INFO jepsen.util - 0 :ok :add 52
INFO jepsen.util - :nemesis :info :start "Cut off {:n5 #{:n2 :n1}, :n4 #{:n2 :n1}, :n1 #{:n4 :n5}, :n2 #{:n4 :n5}}"
INFO jepsen.util - 3 :invoke :add 55
INFO jepsen.util - 2 :invoke :add 56
INFO jepsen.util - 0 :invoke :add 57
INFO jepsen.util - 3 :ok :add 55
INFO jepsen.util - 3 :invoke :add 58
INFO jepsen.util - 3 :ok :add 58
INFO jepsen.util - 3 :invoke :add 59
INFO jepsen.util - 4 :info :add :timed-out
INFO jepsen.util - 1 :info :add :timed-out
INFO jepsen.util - 9 :invoke :add 60
INFO jepsen.util - 6 :invoke :add 61
INFO jepsen.util - 2 :info :add :timed-out
INFO jepsen.util - 6 :ok :add 61
INFO jepsen.util - 0 :info :add :timed-out
INFO jepsen.util - 7 :invoke :add 62
INFO jepsen.util - 6 :invoke :add 63
INFO jepsen.util - 5 :invoke :add 64
INFO jepsen.util - 3 :info :add :timed-out
INFO jepsen.util - 8 :invoke :add 65
INFO jepsen.util - 9 :info :add :timed-out
INFO jepsen.util - 14 :invoke :add 66
INFO jepsen.util - 7 :info :add :timed-out
INFO jepsen.util - 6 :info :add :timed-out
INFO jepsen.util - 5 :info :add :timed-out
INFO jepsen.util - 12 :invoke :add 67
INFO jepsen.util - 11 :invoke :add 68
INFO jepsen.util - 10 :invoke :add 69
INFO jepsen.util - 8 :info :add :timed-out
INFO jepsen.util - 13 :invoke :add 70
INFO jepsen.util - 14 :info :add :timed-out
INFO jepsen.util - 19 :invoke :add 71
INFO jepsen.util - 12 :info :add :timed-out
INFO jepsen.util - 11 :info :add :timed-out
INFO jepsen.util - 10 :info :add :timed-out
INFO jepsen.util - 17 :invoke :add 72
INFO jepsen.util - 16 :invoke :add 73
INFO jepsen.util - 15 :invoke :add 74
INFO jepsen.util - 15 :ok :add 74
INFO jepsen.util - 15 :invoke :add 75
INFO jepsen.util - 13 :info :add :timed-out
INFO jepsen.util - 18 :invoke :add 76
INFO jepsen.util - 19 :info :add :timed-out
INFO jepsen.util - 24 :invoke :add 77
INFO jepsen.util - 17 :info :add :timed-out
INFO jepsen.util - 16 :info :add :timed-out
INFO jepsen.util - 22 :invoke :add 78
INFO jepsen.util - 21 :invoke :add 79
INFO jepsen.util - 22 :ok :add 78
INFO jepsen.util - 15 :info :add :timed-out
INFO jepsen.util - 22 :invoke :add 80
INFO jepsen.util - 20 :invoke :add 81
INFO jepsen.util - 20 :ok :add 81
INFO jepsen.util - 18 :info :add :timed-out
INFO jepsen.util - 20 :invoke :add 82
INFO jepsen.util - 23 :invoke :add 83
INFO jepsen.util - 24 :info :add :timed-out
INFO jepsen.util - 29 :invoke :add 84
INFO jepsen.util - 21 :info :add :timed-out
INFO jepsen.util - 26 :invoke :add 85
INFO jepsen.util - 22 :info :add :timed-out
INFO jepsen.util - 27 :invoke :add 86
INFO jepsen.util - 20 :info :add :timed-out
INFO jepsen.util - 23 :info :add :timed-out
INFO jepsen.util - 25 :invoke :add 87
INFO jepsen.util - 28 :invoke :add 88
INFO jepsen.util - 29 :info :add :timed-out
INFO jepsen.util - 34 :invoke :add 89
INFO jepsen.util - 26 :info :add :timed-out
INFO jepsen.util - 31 :invoke :add 90
INFO jepsen.util - 27 :info :add :timed-out
INFO jepsen.util - 32 :invoke :add 91
INFO jepsen.util - 25 :info :add :timed-out
INFO jepsen.util - 28 :info :add :timed-out
INFO jepsen.util - 30 :invoke :add 92
INFO jepsen.util - 33 :invoke :add 93
INFO jepsen.util - 34 :info :add :timed-out
INFO jepsen.util - 39 :invoke :add 94
INFO jepsen.util - 31 :info :add :timed-out
INFO jepsen.util - 36 :invoke :add 95
INFO jepsen.util - 32 :info :add :timed-out
INFO jepsen.util - 37 :invoke :add 96
INFO jepsen.util - 37 :ok :add 96
INFO jepsen.util - 30 :info :add :timed-out
INFO jepsen.util - 33 :info :add :timed-out
INFO jepsen.util - 37 :invoke :add 97
INFO jepsen.util - 35 :invoke :add 98
INFO jepsen.util - 38 :invoke :add 99
INFO jepsen.util - 39 :info :add :timed-out
INFO jepsen.util - 44 :invoke :add 100
INFO jepsen.util - 36 :info :add :timed-out
INFO jepsen.util - 41 :invoke :add 101
INFO jepsen.util - 38 :ok :add 99
INFO jepsen.util - 37 :info :add :timed-out
INFO jepsen.util - 35 :info :add :timed-out
INFO jepsen.util - 38 :invoke :add 102
INFO jepsen.util - 42 :invoke :add 103
INFO jepsen.util - 40 :invoke :add 104
INFO jepsen.util - 44 :info :add :timed-out
INFO jepsen.util - 49 :invoke :add 105
INFO jepsen.util - 41 :info :add :timed-out
INFO jepsen.util - 46 :invoke :add 106
INFO jepsen.util - 46 :ok :add 106
INFO jepsen.util - 38 :info :add :timed-out
INFO jepsen.util - 46 :invoke :add 107
INFO jepsen.util - 42 :info :add :timed-out
INFO jepsen.util - 46 :ok :add 107
INFO jepsen.util - 40 :info :add :timed-out
INFO jepsen.util - 43 :invoke :add 108
INFO jepsen.util - 43 :ok :add 108
INFO jepsen.util - 47 :invoke :add 109
INFO jepsen.util - 46 :invoke :add 110
INFO jepsen.util - 45 :invoke :add 111
INFO jepsen.util - 45 :ok :add 111
INFO jepsen.util - 43 :invoke :add 112
INFO jepsen.util - 45 :invoke :add 113
INFO jepsen.util - 49 :info :add :timed-out
INFO jepsen.util - 54 :invoke :add 114
INFO jepsen.util - 54 :ok :add 114
INFO jepsen.util - 54 :invoke :add 115
INFO jepsen.util - 47 :info :add :timed-out
INFO jepsen.util - 46 :info :add :timed-out
INFO jepsen.util - 43 :info :add :timed-out
INFO jepsen.util - 52 :invoke :add 116
INFO jepsen.util - 51 :invoke :add 117
INFO jepsen.util - 45 :info :add :timed-out
INFO jepsen.util - 48 :invoke :add 118
INFO jepsen.util - 50 :invoke :add 119
INFO jepsen.util - :nemesis :info :stop nil
INFO jepsen.util - 54 :info :add :timed-out
INFO jepsen.util - :nemesis :info :stop "fully connected"
INFO jepsen.util - 59 :invoke :add 120
INFO jepsen.util - 52 :info :add :timed-out
INFO jepsen.util - 51 :info :add :timed-out
INFO jepsen.util - 48 :info :add :timed-out
INFO jepsen.util - 57 :invoke :add 121
INFO jepsen.util - 56 :invoke :add 122
INFO jepsen.util - 50 :info :add :timed-out
INFO jepsen.util - 53 :invoke :add 123
INFO jepsen.util - 53 :ok :add 123
INFO jepsen.util - 55 :invoke :add 124
INFO jepsen.util - 53 :invoke :add 125
INFO jepsen.util - 53 :ok :add 125
INFO jepsen.util - 53 :invoke :add 126
INFO jepsen.util - 59 :ok :add 120
INFO jepsen.util - 59 :invoke :add 127
INFO jepsen.util - :nemesis :info :start nil
INFO jepsen.util - :nemesis :info :start "Cut off {:n5 #{:n2 :n1}, :n4 #{:n2 :n1}, :n1 #{:n4 :n5}, :n2 #{:n4 :n5}}"
INFO jepsen.util - 57 :info :add :timed-out
INFO jepsen.util - 56 :info :add :timed-out
INFO jepsen.util - 62 :invoke :add 128
INFO jepsen.util - 61 :invoke :add 129
INFO jepsen.util - 55 :info :add :timed-out
INFO jepsen.util - 60 :invoke :add 130
INFO jepsen.util - 53 :info :add :timed-out
INFO jepsen.util - 58 :invoke :add 131
INFO jepsen.util - 58 :ok :add 131
INFO jepsen.util - 58 :invoke :add 132
INFO jepsen.util - 58 :ok :add 132
INFO jepsen.util - 58 :invoke :add 133
INFO jepsen.util - 59 :info :add :timed-out
INFO jepsen.util - 64 :invoke :add 134
INFO jepsen.util - 62 :info :add :timed-out
INFO jepsen.util - 61 :info :add :timed-out
INFO jepsen.util - 67 :invoke :add 135
INFO jepsen.util - 66 :invoke :add 136
INFO jepsen.util - 60 :info :add :timed-out
INFO jepsen.util - 65 :invoke :add 137
INFO jepsen.util - 58 :info :add :timed-out
INFO jepsen.util - 63 :invoke :add 138
INFO jepsen.util - 64 :info :add :timed-out
INFO jepsen.util - 69 :invoke :add 139
INFO jepsen.util - 67 :info :add :timed-out
INFO jepsen.util - 66 :info :add :timed-out
INFO jepsen.util - 72 :invoke :add 140
INFO jepsen.util - 71 :invoke :add 141
INFO jepsen.util - 72 :ok :add 140
INFO jepsen.util - 71 :ok :add 141
INFO jepsen.util - 65 :info :add :timed-out
INFO jepsen.util - 72 :invoke :add 142
INFO jepsen.util - 71 :invoke :add 143
INFO jepsen.util - 70 :invoke :add 144
INFO jepsen.util - 63 :info :add :timed-out
INFO jepsen.util - 68 :invoke :add 145
INFO jepsen.util - 68 :ok :add 145
INFO jepsen.util - 69 :info :add :timed-out
INFO jepsen.util - 68 :invoke :add 146
INFO jepsen.util - 74 :invoke :add 147
INFO jepsen.util - 72 :info :add :timed-out
INFO jepsen.util - 71 :info :add :timed-out
INFO jepsen.util - 70 :info :add :timed-out
INFO jepsen.util - 77 :invoke :add 148
INFO jepsen.util - 76 :invoke :add 149
INFO jepsen.util - 77 :ok :add 148
INFO jepsen.util - 75 :invoke :add 150
INFO jepsen.util - 77 :invoke :add 151
INFO jepsen.util - 68 :info :add :timed-out
INFO jepsen.util - 74 :info :add :timed-out
INFO jepsen.util - 73 :invoke :add 152
INFO jepsen.util - 73 :ok :add 152
INFO jepsen.util - 79 :invoke :add 153
INFO jepsen.util - 73 :invoke :add 154
INFO jepsen.util - 76 :info :add :timed-out
INFO jepsen.util - 75 :info :add :timed-out
INFO jepsen.util - 81 :invoke :add 155
INFO jepsen.util - 77 :info :add :timed-out
INFO jepsen.util - 80 :invoke :add 156
INFO jepsen.util - 80 :ok :add 156
INFO jepsen.util - 82 :invoke :add 157
INFO jepsen.util - 80 :invoke :add 158
INFO jepsen.util - 82 :ok :add 157
INFO jepsen.util - 82 :invoke :add 159
INFO jepsen.util - 79 :info :add :timed-out
INFO jepsen.util - 73 :info :add :timed-out
INFO jepsen.util - 84 :invoke :add 160
INFO jepsen.util - 78 :invoke :add 161
INFO jepsen.util - 81 :info :add :timed-out
INFO jepsen.util - 80 :ok :add 158
INFO jepsen.util - 82 :ok :add 159
INFO jepsen.util - 86 :invoke :add 162
INFO jepsen.util - 86 :ok :add 162
INFO jepsen.util - 80 :invoke :add 163
INFO jepsen.util - 80 :ok :add 163
INFO jepsen.util - 82 :invoke :add 164
INFO jepsen.util - 82 :ok :add 164
INFO jepsen.util - 86 :invoke :add 165
INFO jepsen.util - 86 :ok :add 165
INFO jepsen.util - 80 :invoke :add 166
INFO jepsen.util - 80 :ok :add 166
INFO jepsen.util - 82 :invoke :add 167
INFO jepsen.util - 82 :ok :add 167
INFO jepsen.util - 86 :invoke :add 168
INFO jepsen.util - 86 :ok :add 168
INFO jepsen.util - 80 :invoke :add 169
INFO jepsen.util - 80 :ok :add 169
INFO jepsen.util - 82 :invoke :add 170
INFO jepsen.util - 82 :ok :add 170
INFO jepsen.util - 86 :invoke :add 171
INFO jepsen.util - 86 :ok :add 171
INFO jepsen.util - 80 :invoke :add 172
INFO jepsen.util - 80 :ok :add 172
INFO jepsen.util - 82 :invoke :add 173
INFO jepsen.util - 82 :ok :add 173
INFO jepsen.util - 86 :invoke :add 174
INFO jepsen.util - 86 :ok :add 174
INFO jepsen.util - 80 :invoke :add 175
INFO jepsen.util - 80 :ok :add 175
INFO jepsen.util - 82 :invoke :add 176
INFO jepsen.util - 82 :ok :add 176
INFO jepsen.util - 84 :info :add :timed-out
INFO jepsen.util - 78 :info :add :timed-out
INFO jepsen.util - 86 :invoke :add 177
INFO jepsen.util - 86 :ok :add 177
INFO jepsen.util - 80 :invoke :add 178
INFO jepsen.util - 80 :ok :add 178
INFO jepsen.util - 82 :invoke :add 179
INFO jepsen.util - 82 :ok :add 179
INFO jepsen.util - 89 :invoke :add 180
INFO jepsen.util - 89 :ok :add 180
INFO jepsen.util - 83 :invoke :add 181
INFO jepsen.util - 83 :ok :add 181
INFO jepsen.util - 86 :invoke :add 182
INFO jepsen.util - 86 :ok :add 182
INFO jepsen.util - 80 :invoke :add 183
INFO jepsen.util - 80 :ok :add 183
INFO jepsen.util - 82 :invoke :add 184
INFO jepsen.util - 82 :ok :add 184
INFO jepsen.util - 89 :invoke :add 185
INFO jepsen.util - 89 :ok :add 185
INFO jepsen.util - 83 :invoke :add 186
INFO jepsen.util - 83 :ok :add 186
INFO jepsen.util - 86 :invoke :add 187
INFO jepsen.util - 86 :ok :add 187
INFO jepsen.util - 80 :invoke :add 188
INFO jepsen.util - 80 :ok :add 188
INFO jepsen.util - 82 :invoke :add 189
INFO jepsen.util - 82 :ok :add 189
INFO jepsen.util - 89 :invoke :add 190
INFO jepsen.util - 83 :invoke :add 191
INFO jepsen.util - 86 :invoke :add 192
INFO jepsen.util - 86 :ok :add 192
INFO jepsen.util - 80 :invoke :add 193
INFO jepsen.util - 80 :ok :add 193
INFO jepsen.util - 82 :invoke :add 194
INFO jepsen.util - 82 :ok :add 194
INFO jepsen.util - 86 :invoke :add 195
INFO jepsen.util - 86 :ok :add 195
INFO jepsen.util - 80 :invoke :add 196
INFO jepsen.util - 80 :ok :add 196
INFO jepsen.util - 82 :invoke :add 197
INFO jepsen.util - 82 :ok :add 197
INFO jepsen.util - 86 :invoke :add 198
INFO jepsen.util - 86 :ok :add 198
INFO jepsen.util - 80 :invoke :add 199
INFO jepsen.util - 80 :ok :add 199
INFO jepsen.util - 82 :invoke :add 200
INFO jepsen.util - 82 :ok :add 200
INFO jepsen.util - 86 :invoke :add 201
INFO jepsen.util - 86 :ok :add 201
INFO jepsen.util - 80 :invoke :add 202
INFO jepsen.util - 80 :ok :add 202
INFO jepsen.util - 82 :invoke :add 203
INFO jepsen.util - 82 :ok :add 203
INFO jepsen.util - 86 :invoke :add 204
INFO jepsen.util - 86 :ok :add 204
INFO jepsen.util - 80 :invoke :add 205
INFO jepsen.util - 80 :ok :add 205
INFO jepsen.util - 82 :invoke :add 206
INFO jepsen.util - 82 :ok :add 206
INFO jepsen.util - 86 :invoke :add 207
INFO jepsen.util - 86 :ok :add 207
INFO jepsen.util - 80 :invoke :add 208
INFO jepsen.util - 80 :ok :add 208
INFO jepsen.util - 82 :invoke :add 209
INFO jepsen.util - 82 :ok :add 209
INFO jepsen.util - 86 :invoke :add 210
INFO jepsen.util - 86 :ok :add 210
INFO jepsen.util - 80 :invoke :add 211
INFO jepsen.util - 80 :ok :add 211
INFO jepsen.util - 82 :invoke :add 212
INFO jepsen.util - 82 :ok :add 212
INFO jepsen.util - 86 :invoke :add 213
INFO jepsen.util - 86 :ok :add 213
INFO jepsen.util - 80 :invoke :add 214
INFO jepsen.util - 80 :ok :add 214
INFO jepsen.util - 82 :invoke :add 215
INFO jepsen.util - 82 :ok :add 215
INFO jepsen.util - 86 :invoke :add 216
INFO jepsen.util - 86 :ok :add 216
INFO jepsen.util - 80 :invoke :add 217
INFO jepsen.util - 80 :ok :add 217
INFO jepsen.util - 82 :invoke :add 218
INFO jepsen.util - 82 :ok :add 218
INFO jepsen.util - 86 :invoke :add 219
INFO jepsen.util - 86 :ok :add 219
INFO jepsen.util - 80 :invoke :add 220
INFO jepsen.util - 80 :ok :add 220
INFO jepsen.util - 82 :invoke :add 221
INFO jepsen.util - 82 :ok :add 221
INFO jepsen.util - 89 :info :add :timed-out
INFO jepsen.util - 83 :info :add :timed-out
INFO jepsen.util - 86 :invoke :add 222
INFO jepsen.util - 86 :ok :add 222
INFO jepsen.util - 80 :invoke :add 223
INFO jepsen.util - 80 :ok :add 223
INFO jepsen.util - 82 :invoke :add 224
INFO jepsen.util - 82 :ok :add 224
INFO jepsen.util - 94 :invoke :add 225
INFO jepsen.util - 88 :invoke :add 226
INFO jepsen.util - 86 :invoke :add 227
INFO jepsen.util - 86 :ok :add 227
INFO jepsen.util - 80 :invoke :add 228
INFO jepsen.util - 80 :ok :add 228
INFO jepsen.util - 82 :invoke :add 229
INFO jepsen.util - 82 :ok :add 229
INFO jepsen.util - 86 :invoke :add 230
INFO jepsen.util - 86 :ok :add 230
INFO jepsen.util - 80 :invoke :add 231
INFO jepsen.util - 80 :ok :add 231
INFO jepsen.util - 82 :invoke :add 232
INFO jepsen.util - 82 :ok :add 232
INFO jepsen.util - 86 :invoke :add 233
INFO jepsen.util - 86 :ok :add 233
INFO jepsen.util - 80 :invoke :add 234
INFO jepsen.util - 80 :ok :add 234
INFO jepsen.util - 82 :invoke :add 235
INFO jepsen.util - 82 :ok :add 235
INFO jepsen.util - 86 :invoke :add 236
INFO jepsen.util - 86 :ok :add 236
INFO jepsen.util - 80 :invoke :add 237
INFO jepsen.util - 80 :ok :add 237
INFO jepsen.util - 82 :invoke :add 238
INFO jepsen.util - 86 :invoke :add 239
INFO jepsen.util - 86 :ok :add 239
INFO jepsen.util - 80 :invoke :add 240
INFO jepsen.util - 80 :ok :add 240
INFO jepsen.util - 86 :invoke :add 241
INFO jepsen.util - 86 :ok :add 241
INFO jepsen.util - 80 :invoke :add 242
INFO jepsen.util - 80 :ok :add 242
INFO jepsen.util - 86 :invoke :add 243
INFO jepsen.util - 86 :ok :add 243
INFO jepsen.util - 80 :invoke :add 244
INFO jepsen.util - 80 :ok :add 244
INFO jepsen.util - 86 :invoke :add 245
INFO jepsen.util - 86 :ok :add 245
INFO jepsen.util - 80 :invoke :add 246
INFO jepsen.util - 80 :ok :add 246
INFO jepsen.util - 86 :invoke :add 247
INFO jepsen.util - 86 :ok :add 247
INFO jepsen.util - 80 :invoke :add 248
INFO jepsen.util - 80 :ok :add 248
INFO jepsen.util - 86 :invoke :add 249
INFO jepsen.util - 86 :ok :add 249
INFO jepsen.util - 80 :invoke :add 250
INFO jepsen.util - 80 :ok :add 250
INFO jepsen.util - 94 :info :add :timed-out
INFO jepsen.util - 88 :info :add :timed-out
INFO jepsen.util - 86 :invoke :add 251
INFO jepsen.util - 86 :ok :add 251
INFO jepsen.util - 80 :invoke :add 252
INFO jepsen.util - 80 :ok :add 252
INFO jepsen.util - 99 :invoke :add 253
INFO jepsen.util - 99 :ok :add 253
INFO jepsen.util - 93 :invoke :add 254
INFO jepsen.util - 93 :ok :add 254
INFO jepsen.util - 86 :invoke :add 255
INFO jepsen.util - 80 :invoke :add 256
INFO jepsen.util - 86 :ok :add 255
INFO jepsen.util - 80 :ok :add 256
INFO jepsen.util - 99 :invoke :add 257
INFO jepsen.util - 93 :invoke :add 258
INFO jepsen.util - 93 :ok :add 258
INFO jepsen.util - 86 :invoke :add 259
INFO jepsen.util - 80 :invoke :add 260
INFO jepsen.util - 86 :ok :add 259
INFO jepsen.util - 80 :ok :add 260
INFO jepsen.util - 93 :invoke :add 261
INFO jepsen.util - 86 :invoke :add 262
INFO jepsen.util - 80 :invoke :add 263
INFO jepsen.util - 86 :ok :add 262
INFO jepsen.util - 80 :ok :add 263
INFO jepsen.util - 82 :info :add :timed-out
INFO jepsen.util - 86 :invoke :add 264
INFO jepsen.util - 80 :invoke :add 265
INFO jepsen.util - 86 :ok :add 264
INFO jepsen.util - 80 :ok :add 265
INFO jepsen.util - 87 :invoke :add 266
INFO jepsen.util - 87 :ok :add 266
INFO jepsen.util - 86 :invoke :add 267
INFO jepsen.util - 80 :invoke :add 268
INFO jepsen.util - 86 :ok :add 267
INFO jepsen.util - 80 :ok :add 268
INFO jepsen.util - 87 :invoke :add 269
INFO jepsen.util - 87 :ok :add 269
INFO jepsen.util - 86 :invoke :add 270
INFO jepsen.util - 80 :invoke :add 271
INFO jepsen.util - 80 :ok :add 271
INFO jepsen.util - 86 :ok :add 270
INFO jepsen.util - 87 :invoke :add 272
INFO jepsen.util - 80 :invoke :add 273
INFO jepsen.util - 86 :invoke :add 274
INFO jepsen.util - 86 :ok :add 274
INFO jepsen.util - 80 :ok :add 273
INFO jepsen.util - 86 :invoke :add 275
INFO jepsen.util - 80 :invoke :add 276
INFO jepsen.util - 80 :ok :add 276
INFO jepsen.util - 86 :ok :add 275
INFO jepsen.util - 99 :info :add :timed-out
INFO jepsen.util - 93 :info :add :timed-out
INFO jepsen.util - 87 :info :add :timed-out
INFO jepsen.util - :nemesis :info :stop nil
INFO jepsen.util - :nemesis :info :stop "fully connected"
INFO jepsen.util - :nemesis :info :stop nil
INFO jepsen.util - :nemesis :info :stop "fully connected"
INFO jepsen.generator - waiting for recovery
INFO jepsen.util - 98 :invoke :read nil
INFO jepsen.core - Worker 2 done
INFO jepsen.core - Worker 1 done
INFO jepsen.core - Worker 0 done
INFO jepsen.core - Worker 4 done
INFO jepsen.util - 98 :ok :read #{0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 55 56 57 58 60 61 62 64 65 66 67 68 69 74 76 78 79 80 81 82 85 89 91 92 93 94 95 96 99 100 105 106 107 108 109 110 111 114 115 117 118 120 121 122 123 124 125 129 130 131 132 134 136 138 139 140 141 144 145 148 149 150 151 152 153 156 157 158 160 161 162 163 164 166 167 170 172 174 177 179 180 181 182 184 185 186 188 190 191 192 195 200 201 207 210 212 213 215 217 218 222 225 226 227 228 229 232 233 234 235 236 237 238 240 242 243 251 253 254 255 256 257 258 259 260 261 266 267 268 272 273 274 275 276}
INFO jepsen.core - Worker 3 done
INFO jepsen.core - Run complete, writing
INFO jepsen.core - Analyzing
INFO jepsen.core - Analysis complete
INFO jepsen.system.elasticsearch - :n4 elasticsearch nuked
INFO jepsen.system.elasticsearch - :n5 elasticsearch nuked
INFO jepsen.system.elasticsearch - :n2 elasticsearch nuked
INFO jepsen.system.elasticsearch - :n1 elasticsearch nuked
INFO jepsen.system.elasticsearch - :n3 elasticsearch nuked
FAIL in (register-test) (elasticsearch_test.clj:50)
expected: (:valid? (:results test))
actual: false
{:valid? false,
:html {:valid? true},
:set
{:valid? false,
; These are writes which elasticsearch confirmed as successful, then lost
:lost
"#{159 165 168..169 171 173 175..176 178 183 187 189 193..194 196..199 202..206 208..209 211 214 216 219..221 223..224 230..231 239 241 244..250 252 262..265 269..271}",
; These are writes which we didn't receive a confirmation for, but were present in the final set
:recovered
"#{56..57 60 62 64..69 76 79..80 82 85 89 91..95 100 105 109..110 115 117..118 121..122 124 129..130 134 136 138..139 144 149..151 153 160..161 190..191 225..226 238 257 261 272}",
; Writes which we attempted and were present in the final set
:ok
"#{0..52 55..58 60..62 64..69 74 76 78..82 85 89 91..96 99..100 105..111 114..115 117..118 120..125 129..132 134 136 138..141 144..145 148..153 156..158 160..164 166..167 170 172 174 177 179..182 184..186 188 190..192 195 200..201 207 210 212..213 215 217..218 222 225..229 232..238 240 242..243 251 253..261 266..268 272..276}",
:recovered-frac 52/277,
:unexpected-frac 0,
:unexpected "#{}",
:lost-frac 52/277,
:ok-frac 187/277}}
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment