Ковыряю Hadoop Cloudera, уперся в 2 проблемки.
1. Исходный csv, содержит цифра с разделителем запятая, не пойму что передать в
create tables
...
TBLPROPERTIES( ???
чтобы нормально воспринимал.
2. В файле csv есть поля где строк ограничены двойными "", не все, но есть.
TBLPROPERTIES( прописал 'quoteChar'='"'
не помогает, в значения полей тащатся "....."

H5N1,

Не понимаю, как разделитель полей FORMAT DELIMITED FIELDS TERMINATED BY';'
Повлияет на децимальный сепаратор.

Давайте примером, текст csv

ARTICLE;NAME;SUMM
4345235;"Наименование 1";4343,45
22dfdf343;"Наименование 2";76765
22крк23;"Наименование 3";76732,32

Create external table my.table_csv (
ARTICLE STRING,
NAME STRING,
SUMM DECIMAL(38,2)
)
ROW FORMAT DELIMITED FIELDS TERMINATED BY';'
WITH SERDEPROPERTIES ('quoteChar'='"')
STORED AS TEXTFILE
LOCATION 'hdfs://.....
TBLPROPERTIES ('COLUMN_STATS_ACCURATE'='false', 'numFiles'='0', 'numRows'='-1', 'rawDataSize'='-1', 'skip.header.line.count'='1','totalSize'='0');

Вместо чисел 1 и 3 строки будет NULL.
Наименования в столбце 2 содержат лишние кавычки.

Помучался так "красоты" и не добился, потом коллеги помогли дали пример на python (pandas), я на его базе допилил конвертацию своего csv в parquet, заодно с сжатием.