java.io.IOException: Could not read footer: java.lang.RuntimeException: file:/home/noootsab/data/genomics/sim_reads_aligned.bam.adam/part-r-00000.gz.parquet.crc is not a Parquet file. expected magic number at tail [80, 65, 82, 49] but found [88, 94, 33, 60]

github.com | 4 months ago
  1. 0

    merged branch-0.5 and fix tachyon.js loading · andypetrella/spark-notebook@9d4f1af · GitHub

    github.com | 4 months ago
    java.io.IOException: Could not read footer: java.lang.RuntimeException: file:/home/noootsab/data/genomics/sim_reads_aligned.bam.adam/part-r-00000.gz.parquet.crc is not a Parquet file. expected magic number at tail [80, 65, 82, 49] but found [88, 94, 33, 60]
  2. 0

    GitHub comment 161#96102037

    GitHub | 2 years ago | andypetrella
    java.io.IOException: Could not read footer: java.lang.RuntimeException: file:/home/noootsab/data/genomics/sim_reads_aligned.bam.adam/part-r-00000.gz.parquet.crc is not a Parquet file. expected magic number at tail [80, 65, 82, 49] but found [88, 94, 33, 60]
  3. 0

    Re: Using Parquet from an interactive Spark shell

    apache.org | 11 months ago
    java.io.IOException: Could not read footer: java.lang.NoClassDefFoundError: parquet/org/codehaus/jackson/JsonGenerationException
  4. Speed up your debug routine!

    Automated exception search integrated into your IDE

  5. 0

    Re: Using Parquet from an interactive Spark shell

    spark-user | 3 years ago | Andrew Ash
    java.io.IOException: Could not read footer: java.lang.NoClassDefFoundError: parquet/org/codehaus/jackson/JsonGenerationException
  6. 0

    Re: Using Parquet from an interactive Spark shell

    Google Groups | 3 years ago | Uri Laserson
    java.io.IOException: Could not read footer: java.lang.NoClassDefFoundError: parquet/org/codehaus/jackson/JsonGenerationException

    Not finding the right solution?
    Take a tour to get the most out of Samebug.

    Tired of useless tips?

    Automated exception search integrated into your IDE

    Root Cause Analysis

    1. java.io.IOException

      Could not read footer: java.lang.RuntimeException: file:/home/noootsab/data/genomics/sim_reads_aligned.bam.adam/part-r-00000.gz.parquet.crc is not a Parquet file. expected magic number at tail [80, 65, 82, 49] but found [88, 94, 33, 60]

      at parquet.hadoop.ParquetFileReader.readAllFootersInParallel()
    2. Parquet
      ParquetInputFormat.getSplits
      1. parquet.hadoop.ParquetFileReader.readAllFootersInParallel(ParquetFileReader.java:238)
      2. parquet.hadoop.ParquetFileReader.readAllFootersInParallelUsingSummaryFiles(ParquetFileReader.java:179)
      3. parquet.hadoop.ParquetInputFormat.getFooters(ParquetInputFormat.java:400)
      4. parquet.hadoop.ParquetInputFormat.getFooters(ParquetInputFormat.java:372)
      5. parquet.hadoop.ParquetInputFormat.getSplits(ParquetInputFormat.java:256)
      5 frames
    3. Spark
      RDD$$anonfun$partitions$2.apply
      1. org.apache.spark.rdd.NewHadoopRDD.getPartitions(NewHadoopRDD.scala:95)
      2. org.apache.spark.rdd.RDD$$anonfun$partitions$2.apply(RDD.scala:219)
      3. org.apache.spark.rdd.RDD$$anonfun$partitions$2.apply(RDD.scala:217)
      3 frames
    4. Scala
      Option.getOrElse
      1. scala.Option.getOrElse(Option.scala:120)
      1 frame
    5. Spark
      RDD$$anonfun$partitions$2.apply
      1. org.apache.spark.rdd.RDD.partitions(RDD.scala:217)
      2. org.apache.spark.rdd.MapPartitionsRDD.getPartitions(MapPartitionsRDD.scala:32)
      3. org.apache.spark.rdd.RDD$$anonfun$partitions$2.apply(RDD.scala:219)
      4. org.apache.spark.rdd.RDD$$anonfun$partitions$2.apply(RDD.scala:217)
      4 frames
    6. Scala
      Option.getOrElse
      1. scala.Option.getOrElse(Option.scala:120)
      1 frame
    7. Spark
      RDD.count
      1. org.apache.spark.rdd.RDD.partitions(RDD.scala:217)
      2. org.apache.spark.SparkContext.runJob(SparkContext.scala:1512)
      3. org.apache.spark.rdd.RDD.count(RDD.scala:1006)
      3 frames
    8. Unknown
      $iwC.<init>
      1. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:52)
      2. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:57)
      3. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:59)
      4. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:61)
      5. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:63)
      6. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:65)
      7. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:67)
      8. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:69)
      9. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:71)
      10. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:73)
      11. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:75)
      12. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:77)
      13. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:79)
      14. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:81)
      15. $iwC$$iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:83)
      16. $iwC$$iwC$$iwC$$iwC$$iwC.<init>(<console>:85)
      17. $iwC$$iwC$$iwC$$iwC.<init>(<console>:87)
      18. $iwC$$iwC$$iwC.<init>(<console>:89)
      19. $iwC$$iwC.<init>(<console>:91)
      20. $iwC.<init>(<console>:93)
      20 frames