You are viewing a plain text version of this content. The canonical link for it is here.
Posted to commits@hudi.apache.org by "zyclove (via GitHub)" <gi...@apache.org> on 2023/06/09 09:01:18 UTC

[GitHub] [hudi] zyclove commented on issue #8912: [SUPPORT]hudi 0.12.2 sometimes appear org.apache.hudi.exception.HoodieIOException: IOException when reading log file

zyclove commented on issue #8912:
URL: https://github.com/apache/hudi/issues/8912#issuecomment-1584224571

   > @zyclove Can you post your table configuration please.
   
   hudi:ods_smart_gateway_batch->desc 
   ╔═════════════════════════════════════════════════╤══════════════════════════════════════════════════════════════════════╗
   ║ Property                                        │ Value                                                                ║
   ╠═════════════════════════════════════════════════╪══════════════════════════════════════════════════════════════════════╣
   ║ basePath                                        │ s3://tuya-big-data-us/hudi/bi/bi_ods/ods_smart_gateway_batch         ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ metaPath                                        │ s3://tuya-big-data-us/hudi/bi/bi_ods/ods_smart_gateway_batch/.hoodie ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ fileSystem                                      │ s3                                                                   ║
   ╟─────────────���───────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.compaction.payload.class                 │ org.apache.hudi.common.model.DefaultHoodieRecordPayload              ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.table.metadata.partitions                │ files                                                                ║
   ╟──────────────────────��──────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.table.type                               │ MERGE_ON_READ                                                        ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.table.precombine.field                   │ gmt_modified                                                         ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.table.partition.fields                   │ dt                                                                   ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.table.cdc.enabled                        │ false                                                                ║
   ╟─────────────────────────────────────────���───────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.archivelog.folder                        │ archived                                                             ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.timeline.layout.version                  │ 1                                                                    ║
   ╟─────────────────────────────────────────────────┼��─────────────────────────────────────────────────────────────────────╢
   ║ hoodie.table.checksum                           │ 3204991261                                                           ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.datasource.write.drop.partition.columns  │ false                                                                ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.table.timeline.timezone                  │ LOCAL                                                                ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.table.recordkey.fields                   │ id                                                                   ║
   ╟─────────────────────────────────────────────────┼───────────────────���──────────────────────────────────────────────────╢
   ║ hoodie.table.name                               │ ods_smart_gateway_batch                                              ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.partition.metafile.use.base.format       │ false                                                                ║
   ╟─────────────────────────────────────────────────┼───────────────────────────────────────���──────────────────────────────╢
   ║ hoodie.datasource.write.hive_style_partitioning │ true                                                                 ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.populate.meta.fields                     │ true                                                                 ║
   ╟─────────────────────────────────────────────────┼────────────────────────────────────────────────��─────────────────────╢
   ║ hoodie.table.keygenerator.class                 │ org.apache.hudi.keygen.SimpleKeyGenerator                            ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.table.base.file.format                   │ PARQUET                                                              ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.database.name                            │                                                                      ║
   ╟─────────────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.datasource.write.partitionpath.urlencode │ false                                                                ║
   ╟────────���────────────────────────────────────────┼──────────────────────────────────────────────────────────────────────╢
   ║ hoodie.table.version                            │ 5                                                                    ║
   ╚═════════════════════════════════════════════════╧══════════════════════════════════════════════════════════════════════╝


-- 
This is an automated message from the Apache Git Service.
To respond to the message, please log on to GitHub and use the
URL above to go to the specific comment.

To unsubscribe, e-mail: commits-unsubscribe@hudi.apache.org

For queries about this service, please contact Infrastructure at:
users@infra.apache.org