You are viewing a plain text version of this content. The canonical link for it is here.
Posted to commits@hudi.apache.org by GitBox <gi...@apache.org> on 2022/04/03 16:21:41 UTC

[GitHub] [hudi] vinothchandar commented on pull request #5179: [HUDI-3290] Different file formats for the partition metadata file.

vinothchandar commented on pull request #5179:
URL: https://github.com/apache/hudi/pull/5179#issuecomment-1086901078


   Testing the migration CLI 
   
   ```
   hudi:hoodie_test->repair migrate-partition-meta 
   ╔════════════════╤═════════════════════════╤═════════════════════════╤═════════╗
   ║ Partition Path │ Text Metafile present ? │ Base Metafile present ? │ Action  ║
   ╠════════════════╪═════════════════════════╪═════════════════════════╪═════════╣
   ║ 2016/03/15     │ true                    │ false                   │ MIGRATE ║
   ╟────────────────┼─────────────────────────┼─────────────────────────┼─────────╢
   ║ 2015/03/16     │ true                    │ false                   │ MIGRATE ║
   ╟────────────────┼─────────────────────────┼─────────────────────────┼─────────╢
   ║ 2015/03/17     │ true                    │ false                   │ MIGRATE ║
   ╚════════════════╧═════════════════════════╧═════════════════════════╧═════════╝
   
   hudi:hoodie_test->repair migrate-partition-meta --dryrun false
   256730 [Spring Shell] INFO  org.apache.parquet.hadoop.InternalParquetRecordWriter  - Flushing mem columnStore to file. allocated memory: 0
   256790 [Spring Shell] INFO  org.apache.parquet.hadoop.InternalParquetRecordWriter  - Flushing mem columnStore to file. allocated memory: 0
   256810 [Spring Shell] INFO  org.apache.parquet.hadoop.InternalParquetRecordWriter  - Flushing mem columnStore to file. allocated memory: 0
   ╔════════════════╤═════════════════════════╤═════════════════════════╤══════════╗
   ║ Partition Path │ Text Metafile present ? │ Base Metafile present ? │ Action   ║
   ╠════════════════╪═════════════════════════╪═════════════════════════╪══════════╣
   ║ 2015/03/16     │ true                    │ false                   │ MIGRATED ║
   ╟────────────────┼─────────────────────────┼─────────────────────────┼──────────╢
   ║ 2016/03/15     │ true                    │ false                   │ MIGRATED ║
   ╟────────────────┼─────────────────────────┼─────────────────────────┼──────────╢
   ║ 2015/03/17     │ true                    │ false                   │ MIGRATED ║
   ╚════════════════╧═════════════════════════╧═════════════════════════╧══════════╝
   
   hudi:hoodie_test->repair migrate-partition-meta 
   ╔════════════════╤═════════════════════════╤═════════════════════════╤════════╗
   ║ Partition Path │ Text Metafile present ? │ Base Metafile present ? │ Action ║
   ╠════════════════╪═════════════════════════╪═════════════════════════╪════════╣
   ║ 2015/03/16     │ false                   │ true                    │ NONE   ║
   ╟────────────────┼─────────────────────────┼─────────────────────────┼────────╢
   ║ 2016/03/15     │ false                   │ true                    │ NONE   ║
   ╟────────────────┼─────────────────────────┼─────────────────────────┼────────╢
   ║ 2015/03/17     │ false                   │ true                    │ NONE   ║
   ╚════════════════╧═════════════════════════╧═════════════════════════╧════════╝
   
   hudi:hoodie_test->
   ```


-- 
This is an automated message from the Apache Git Service.
To respond to the message, please log on to GitHub and use the
URL above to go to the specific comment.

To unsubscribe, e-mail: commits-unsubscribe@hudi.apache.org

For queries about this service, please contact Infrastructure at:
users@infra.apache.org