Red de conocimiento informático - Material del sitio web - Encontrar problemas con el almacenamiento de archivos en Big Data-Count Warehouse HIVE (TEXTFILE, RCFILE)

Encontrar problemas con el almacenamiento de archivos en Big Data-Count Warehouse HIVE (TEXTFILE, RCFILE)

Problema:

Error con excepción, formato de archivo incorrecto. Por favor verifique el formato del archivo.

Fallo: Error de ejecución, código de retorno 1 de org.apache.hadoop.hive.ql.exec.MoveTask

Solución:

Encontré este problema, Es seguro asumir que el formato del archivo no coincide con el formato de almacenamiento especificado al crear la tabla.

A partir de esto, podrás identificar el problema.

1. Determine el formato de la fuente de datos:

Generalmente un archivo txt/csv

2. Determine el formato de almacenamiento especificado al crear la tabla

show create table table_name;

Luego vea:

ALMACENADO COMO INPUTFORMAT # Especifique el formato de almacenamiento

3. Reconstruya la tabla y modifique el formato especificado. formato de almacenamiento

p>

4.