Uploaded image for project: 'WiredTiger'
  1. WiredTiger
  2. WT-10786

Block checksum mismatch in bench-tiered-push-pull-s3

    • v7.0

      bench-tiered-push-pull-s3 on ubuntu2004

      Host: i-0e02cfe8d7166c3b2
      Project: wiredtiger
      Commit: 8c555785

      Task Logs:

      bench-tiered-push-pull-s3 task_log

      Logs:

      [1679328777:668498][11594:0x7f15235edc40], tiered:test_push_pull, WT_CURSOR.next: [WT_VERB_DEFAULT][ERROR]: __wt_block_read_off, 222: pfx-test_push_pull-0000000001.wtobj: potential hardware corruption, read checksum error for 57344B block at offset 6311936: block header checksum of 0x82aef364 doesn't match expected checksum of 0x2e988fa5
      [1679328777:668632][11594:0x7f15235edc40], tiered:test_push_pull, WT_CURSOR.next: [WT_VERB_DEFAULT][ERROR]: __wt_bm_corrupt_dump, 74: {1: 6311936, 57344, 0x2e988fa5}: (chunk 1 of 56): 2b df 6e 48 26 52 74 16 b0 40 8e 1d e0 b2 fe 86 20 37 2a 8a ba db 61 8e c4 52 5f ba 22 8b 16 0a 64 f3 ae 82 45 d2 ef 2e 30 af 55 b9 c7 dd 2a 60 b9 b6 ff 23 cc df cf 00 11 e3 02 92 a0 80 c0 48 c7 f7 ab 09 eb b2 f8 7e 2f 8e b2 60 60 1e a2 02 2a 62 ba b9 19 c5 92 8e 2e af d7 83 22 13 96 1f d6 e7 6c b2 23 33 84 fb c9 40 ed ad b8 4e d3 aa c6 d3 fb 16 fc 29 1d 72 ea 38 ae 24 07 5c 30 4a 45 eb 08 af e1 2f ec 30 22 31 1c 73 0a 53 34 70 29 17 85 57 e0 d9 74 21 1a 2b 43 2a 36 34 d1 bf c0 a4 b1 4c 57 81 4d 96 5e 5c 2d 3d 4b 25 ce 04 da f2 0e 14 83 bc 4e 1b 60 70 ed 9b 3a 5d b6 82 25 e6 e3 eb 17 39 5f f7 45 0c fb 15 41 17 23 17 ee a7 ba 7d 53 80 b9 dc 2e 68 5e 47 97 b9 ac 56 40 89 a1 63 39 b2 e0 b6 b9 d5 ce 8e 32 f0 37 01 83 d1 c9 9c 99 48 cd 9e be f8 31 d6 61 55 5f 7c 63 e8 b8 e6 94 3d d2 00 11 e3 02 92 a1 80 c0 48 fa e1 3d 4f 57 a1 09 e5 f9 09 5f 22 6b 72 1d de 64 2c 10 2b d7 64 33 93 a0 ce a2 9f 35 ea 95 34 ad 28 33 55 fe a1 d3 50 69 35 d3 da 41 c4 7f 27 5f 59 d1 07 05 6e a2 0c e2 96 2d 05 1e 99 18 60 74 aa 86 94 90 8c 76 e1 ba 9d db 75 7d 34 b0 f6 b1 cc 25 48 29 b3 40 e1 5c 61 b4 11 aa 52 2e ad 2b 56 99 9a c6 a4 3d 0c ef 3e a6 f3 e4 84 59 57 66 ef 4c 0e a7 46 1e 53 b7 83 24 04 bc 41 b6 fd 81 a9 5a 7f a5 d7 5a 4b 13 08 1b 0c ac 62 6c bb 9a e2 01 e2 44 87 84 9d 1d 68 ef 95 51 e2 22 e2 12 f2 ae 7e 2f 34 dd ec 82 68 71 14 1d 1d 01 69 47 ec 1d 87 da 54 9e 1f 9e 19 1c 45 b3 cb 7f 88 f1 9f 21 88 02 b0 bc 00 11 e3 02 92 a2 80 c0 48 48 90 a4 fa 03 ca 4a 42 ca c1 c6 3d 14 9c 93 ab da 8e 8d a0 a9 e4 d5 4f 53 70 b4 8a bf 01 a2 07 b7 b5 9c ba 99 50 c5 8b 2c 76 4f 85 02 8d b8 1a cb d5 24 a2 f2 3c 98 cc f3 43 be c2 2c c7 de 6b 89 a0 14 cf 93 c2 f4 16 e0 f4 ed 62 12 d2 7a cb 93 45 f9 5a 80 c6 7d c8 f2 ce 86 2a cc 24 25 9e cd 80 8f ac 57 76 ed 48 55 4c 98 18 d2 31 93 85 2a 2f 27 7e a8 7d 98 2d 57 3c 01 92 5e 0b fd 95 5b 8d 25 18 b4 18 86 dc 2d c7 49 59 29 9b 3e 8e 1c b3 df 92 d4 25 3f 88 cf 1f 91 e7 83 ac aa 2d 85 bb cc a8 eb 32 de 28 42 f5 3f f5 3b 11 06 03 69 b2 b0 08 ae 90 72 12 94 b3 ea 6c 6e 61 36 e0 86 c1 7e 2d 07 7f 1c 00 11 e3 02 92 a3 80 c0 48 19 d1 ce 29 bd 91 1d ca 2b 16 44 cf 19 21 99 56 b2 fa c4 27 cb 2a db 6d f7 03 76 30 f2 02 9c 4a 25 7b e1 1f ea 18 fe dc e9 49 af 1c ee 5d 4a 07 9f 6c 8a f9 d0 de 1b 94 54 9f c3 4b 88 8f 6b ba 6b 9f 48 84 f1 27 5a da dd d6 04 33 11 e4 9b e1 ad b8 a3 79 64 2d c1 d0 41 7f 5f 9c 3d fe 9e e7 76 c7 c6 a1 30 97 3b bf 75 60 c2 e4 05 0a cb 39 39 97 27 c6 32 04 ba d0 dc 62 50 cf 3b 89 a1 76 90 17 9e 32 34 6a 3d 8d 98 c1 01 8d c1 56 5b 08 10 16 58 b1 dd d7 55 0e a2 d1 11 31 f0 50 64 fc 25 88 93 ea f0 34 bd 41 ce a8 2f 2e d9 fb 2c ef 55 fa a3 e9 4b 0c 2d c0 a9 0c 04 aa d4 31 7a 3a 5f 59 41 56 12 d5 99 00 11 e3 02 92 a4 80 c0 48 a7 a6 cf 4d 7b 79 18 6b 8e 4e 12 75 c9 f5 7c ad 63 a8 e9 b6 07 55 94 e2 c0 ff fc ed 94 97 9d 17 7c c4 e4 2c 5b 2e b5 22 91 57 1b 40 79 85 c0 66 52 28 18 bf ed 1d ab df 61 5e 55 b8 ea d5 56 4e 8c fb 5d bd 57 04 26 53 61 34 62 27 7a df 91 8f 22 4b 89 cd f1 9b e1 cf d6 b4 e7 5a d3 bc 97 05 2d 81 4c 39 5a 43 c6 19 bc 33 20 5c 4e d0 ec 7b 14 6b 22 48 8d 09 d5 ad e9 b2 66 1d 35 5f 8e fa
      [1679328777:668767][11594:0x7f15235edc40], tiered:test_push_pull, WT_CURSOR.next: [WT_VERB_DEFAULT][ERROR]: __wt_bm_corrupt_dump, 74: {1: 6311936, 57344, 0x2e988fa5}: (chunk 2 of 56): eb be f7 8f 55 6a c9 75 bb cd 08 a3 35 8c 3a c8 31 63 9e 11 8d 08 62 7e 8f ad 89 f6 e0 47 b0 99 bc 68 6c 67 ac 51 7e b9 7d 18 bd 4b e5 db 7e 0a cf 01 a2 44 be 8d 2b 9e ec 3d 12 a7 1f 1a fa 15 38 e7 02 7a 2a 31 87 00 11 e3 02 92 a5 80 c0 48 2a ca b7 5e 2c 1c 57 e3 18 52 7d 4f ed d8 01 7d 5d fb 37 85 43 c9 db 66 6f c5 32 e3 9e d8 b3 1b 0c 37 47 e5 a3 89 a7 a3 e2 e4 ec fa e1 4c 89 16 43 7f 9c 03 b1 14 26 8f fd af 65 44 03 c4 75 20 b6 22 df 25 d6 72 cb be 60 14 de da fc 0e 4f 64 2a be a0 e6 89 38 14 26 cc ff 7e 20 f9 1e d9 2e 8c dd 29 80 0f cc 5e 40 2a 7f b9 da ad fd 41 ec d7 29 ac 9a 7b b5 e6 c8 ec 1d 6a ca 55 fe 01 51 47 df df a9 aa e7 d6 b5 ae 38 3e 42 45 c1 12 19 06 bd d5 f3 a5 d1 5d aa 48 9d 7e b8 eb 1f ff ae a8 ac f2 c6 d1 6f db f9 da 85 a0 aa 57 b3 3e 11 43 52 d5 88 a1 dc e5 0c 49 77 a5 c5 b8 48 9b 31 9f 75 23 66 f8 d6 70 00 11 e3 02 92 a6 80 c0 48 c2 05 16 09 c6 d6 72 08 f3 c1 1e 15 06 f6 79 a2 64 ba fe c6 7c 42 c7 e3 81 43 29 40 79 3e 0f a3 3c e9 e2 ef 92 b1 97 7d ca 83 53 ce a2 01 42 c1 3c 38 16 ed a6 1c bd 1a 2e 75 05 f1 39 73 9b 17 af 36 0b e9 96 58 27 2a 93 59 99 28 b8 86 21 f3 5e 53 ab 8e 5c 77 d1 3e 51 d5 c9 93 bb 62 c9 6d a5 25 e8 7a d5 0e e2 80 e4 41 8f f6 e8 91 26 f2 98 aa c4 4e 3a 10 b9 1f ad 28 f4 a7 89 bb a6 95 d3 8b 35 f5 f0 64 ab 1d 48 0e 0d c8 16 18 27 1c 21 66 43 c8 ad e0 56 de fd 36 37 48 40 5a 5b 58 41 e5 6b a4 ca 89 31 63 97 7c 06 4a 01 2d 01 90 bf c0 6e 6c 26 ec 04 27 33 8e 1b 99 97 b6 2f a6 a2 6a d2 f0 01 b9 f6 00 11 e3 02 92 a7 80 c0 48 ba ac 5f af 3f 04 8f 04 d0 0d ea b9 7d fe 98 52 33 95 01 79 c5 a1 66 0c ee fd 9b c2 d7 ba f1 f3 e3 bf 98 7f d6 57 79 89 9b 34 a8 83 cd 8d dc 32 40 30 77 93 93 52 fb 2a 01 a5 2d 43 5a d8 73 90 c9 9c 3e d3 6d 44 9a b8 6f 40 f3 e7 bd 3d e6 99 ca ff f8 62 99 79 ed 73 ce 23 a5 e7 ad c8 40 c9 38 bf c1 fd 47 16 80 76 2b da a6 49 48 8f 30 52 f2 d9 43 18 5e 67 fa 9e f2 30 e1 8e 5f 4a 30 2a 03 29 12 e1 d5 52 bd e9 81 6f 15 24 b5 55 b2 8e 59 92 45 36 97 38 ea 98 b4 51 37 80 ce dc ab 39 8c 2b ae d1 1b da 81 13 36 6e 51 98 d3 5c a9 be 6e 28 38 b1 fe 07 52 5c 15 b8 26 9e c6 9f 26 37 e9 41 d2 39 62 87 2e 00 11 e3 02 92 a8 80 c0 48 93 ce a2 45 45 eb 07 aa 8c a1 f3 b0 ce 6c de 03 5f 74 77 7d df 5a f3 a9 c9 6c a1 3b 09 af 57 80 67 02 58 de 17 cd eb f2 2c 83 90 f5 39 4d 35 5a 78 39 32 9a c4 68 6a 73 78 33 be 24 0e b7 e6 4e 88 af 41 6b ca 5a 03 a7 de 4d 9e 77 f8 be 94 55 0e f7 b9 77 da 89 b7 49 7d 1b db 33 52 33 22 9c cd 4d 68 1d 01 d3 38 7b a7 30 70 52 4f 99 35 72 8e b6 79 9e 09 62 b3 17 7e 6e b3 75 d2 d0 90 0e 33 62 98 8e ac be 17 e7 77 ab 81 a1 53 bf e7 e8 11 dd 1f fb a1 83 ac aa fe e9 41 0d 66 41 9a cf 03 e6 39 97 d0 97 27 7a 47 e2 6d 1a b7 e0 ec f7 4b 5d 67 94 5a 9e 3a cf 08 66 fd 26 da 3b a1 c5 4b 4a 45 f4 c8 86 9a 00 11 e3 02 92 a9 80 c0 48 06 1c 6f 1b 1f b3 0d 57 e0 e9 29 87 36 49 d4 c1 e1 68 2f 3c a4 7c cc 13 96 09 f8 d0 ad f9 6e b1 e1 68 fd db 54 07 a0 41 d6 24 92 d2 e1 85 cf e9 0b 93 f1 32 15 d7 29 8b 60 e0 5f 87 55 ed d3 51 bb fd 1e 34 5a 7a f2 11 8f f2 be 60 3f 86 f7 b2 93 67 57 0a 34 89 38 22 4e b4 57 e5 80 51 a2 f0 2e fc f5 1a cf 64 eb 11 07 1f 32 b0 81 82 ea 54
      [1679328777:668880][11594:0x7f15235edc40], tiered:test_push_pull, WT_CURSOR.next: [WT_VERB_DEFAULT][ERROR]: __wt_bm_corrupt_dump, 74: {1: 6311936, 57344, 0x2e988fa5}: (chunk 3 of 56): ec 79 5b 56 4e 84 01 7b 96 82 47 0e 8b e7 12 83 a4 15 80 cc ec fd ba 72 51 c2 c5 ea d9 4c 29 42 79 d9 36 db 0f 5f af 8f 3e 20 50 e9 74 2d 8c 72 79 05 c7 50 8d f2 db 41 7a 62 7a 0a 66 93 68 49 f5 72 1f ab ee 33 d2 93 e7 89 4b f9 78 99 80 6c 10 19 2d 83 2d b0 46 00 11 e3 02 92 aa 80 c0 48 ff 47 18 bb 09 64 57 bb 25 e9 d1 32 c9 0b a0 ee 85 ab 42 4f 3e ed 02 1d 4c f1 bf b5 50 d9 66 b3 54 b1 5e 80 a8 bb 66 6c ea f2 7a 52 28 5a 87 a6 b2 3a fc c9 29 a4 d4 03 bc ca b0 3b 79 ba 2a b6 da 9a ca 2a 18 55 19 40 54 7b 4c bc a0 d8 5b b4 06 d3 ee fd 60 52 0f 53 f1 af 8b 89 5d 4d 32 d8 f4 cb 49 ce f0 32 ac a2 b2 76 c4 9a b5 e6 fc c4 32 73 37 2f cc b9 0a 53 88 36 ad ce e6 9e 38 67 9a 1f c3 d4 25 aa 23 fe 56 d8 48 ce a2 1a ff 11 3e 54 a1 69 9b d5 35 01 18 e3 cb 8b 22 8d 2f ee ae 9a dc 48 88 2f 83 82 e5 37 66 98 83 2a bf 2d a9 13 77 a1 59 0e ec bd b0 cf 20 0a f6 90 17 54 ad df 65 20 5d e2 f0 00 11 e3 02 92 ab 80 c0 48 e2 98 83 3a 90 44 9a 60 3c 96 eb 1d 2c 90 56 3e dd a6 a2 da d4 bf c1 d7 21 6e f6 fa ee d2 d0 e1 d1 87 e6 ef 75 e4 8f 6e cc 38 21 28 3f 7d 35 c1 39 f1 f9 dc e4 7e 94 ab 6c 96 7a 56 fe 6f 62 1c cc 4f c8 04 56 67 c2 6d 9f 7d 65 e3 ab d4 25 7b c6 cf 6c 9f d1 37 ea 1d 4b 43 32 b3 54 fe 51 0e fe ae 4a 10 37 1f 77 af 15 dd 55 2e 70 89 6c 55 e7 24 13 a2 a7 06 c6 6a 28 d1 c7 49 6e 94 62 fb 98 04 0a 91 0c 10 94 27 33 31 e9 e4 b6 d1 5e 0b 5b b2 22 71 22 77 61 c5 95 01 20 51 a6 0a 62 57 1a 09 03 be 5d 51 15 e7 05 31 b1 03 ac 6e 33 d8 03 d0 3a 35 b2 07 dc bb 21 09 ce cf 32 01 1b 7b ce d3 5b ba 5f 21 34 00 11 e3 02 92 ac 80 c0 48 a1 a1 9b f6 3b c8 99 01 f2 a2 c4 89 e0 7c 6f d6 d7 24 e9 51 b6 6c 99 5c 99 e9 ee 29 15 c6 fd f0 66 fc ee ea e0 20 8b ea 16 bd 7e 70 66 c8 be a6 45 26 2b ca 7f 98 2d 75 3d 43 f8 89 87 13 30 4f 59 79 f7 ee b6 d8 a0 80 a1 49 84 20 c3 32 b0 6b 7d b1 02 5c 22 b7 e7 59 5b ad b2 87 49 69 4d f3 8c 10 f0 ed 7f c9 8e 77 94 6f 74 47 ef 95 e7 cc 61 56 10 90 03 c1 e3 5b fa 8a c6 21 e2 04 f3 da 10 89 71 b0 a2 66 f5 05 62 57 88 26 47 42 f6 6e a2 78 52 7f 77 85 bd 8f 3b fe 92 85 2d 31 57 b1 b2 dd ba eb 25 56 e8 c7 99 ed c0 e9 06 54 cd 25 e9 fc 50 5b 1f c3 f3 d5 82 41 1f 49 e3 95 84 49 1d de 54 8f e8 78 d7 00 11 e3 02 92 ad 80 c0 48 3c a8 af d5 0e 25 a1 89 4b 53 34 aa d0 a9 94 35 be e4 dd 8e 93 89 32 7f 6b 20 60 df f4 72 a6 5f 3d 59 ab b9 aa 73 e7 3e 49 90 45 87 b2 dd bb 24 7c 47 1c be 82 9d e4 2c 0a 55 5f 7d 64 25 ca 9a d6 c2 72 23 b5 60 5b 2f ef 8e 05 31 23 05 7c f8 bd 27 4b c8 e0 8a f5 c6 d1 83 6c dc ab 8e 56 ef 2b 52 54 58 ad 94 77 a3 c1 82 86 bb 90 e0 72 9e f1 e0 83 3c ed fd 87 7d 0c 6b 65 6b e7 24 03 34 e5 01 14 3b 88 3f 2c 72 f0 e8 fc 10 88 c1 6e b6 24 2c f8 73 8b 85 c8 7d f0 94 d9 5a d2 8f e5 6a 11 3c c0 8b 04 e1 92 43 e9 0c 9b d8 17 98 ae 6f be fe 4c 26 f0 b9 2f e8 04 3b 3a 46 89 d8 12 22 11 6d c5 71 fa 27 8c 00 11 e3 02 92 ae 80 c0 48 4b 83 e4 f1 85 71 88 08 b4 05 ac 82 8e f0 64 91 32 34 a6 6b 94 97 28 d8 ff bc 2e 67 d6 c2 ac 19 a0 b8 d7 2c 69 cc d6 b9 61 ce b6 b4 23 fd 31 75 6f b2 ce 0d 57 b6 ce e7 e1 49 3b a1 
      

      logs

      bench-tiered-push-pull-s3 task_log

      Logs:

      #3  0x00007f1523e18f9e in __wt_panic_func (session=session@entry=0x29c4130, error=error@entry=-31802, func=func@entry=0x7f1523e51a50 <__PRETTY_FUNCTION__.0> "__wt_block_read_off", line=line@entry=235, category=category@entry=WT_VERB_DEFAULT, fmt=fmt@entry=0x7f1523e51a2e "%s: fatal read error") at /data/mci/524fb628d9aa2a394ebecc7380e9f51c/wiredtiger/src/support/err.c:570
      
      

      logs

            Assignee:
            peter.macko@mongodb.com Peter Macko
            Reporter:
            Xgen-BuildBaron-User xgen-buildbaron-user
            Votes:
            0 Vote for this issue
            Watchers:
            6 Start watching this issue

              Created:
              Updated:
              Resolved: