Свързани въпроси 'cloudera-cdh'
Конфигуриране на Sqoop2 TEXT_FILE изходен формат
Използвам Sqoop2 (Sqoop 1.99.3-cdh5.1.0) за импортиране на данни от база данни postgresql. Задачата завършва успешно и създава текстови файлове в HDFS. Изходните файлове са CSV с единични кавички, бих искал да конфигурирам изхода да бъде разделен с...
503 изгледи
schedule
07.11.2022
Map Reduce Slot Definition
На път съм да стана администратор на Cloudera Hadoop. Откакто започнах, чувам много за изчислителни слотове на машина в Hadoop клъстер като определяне на броя на слотовете за карта и слотовете за намаляване.
Търсих в интернет време за регистриране...
6447 изгледи
schedule
31.10.2023
CDH5 hdfs балансираща грешка
изпълнявайки „hdfs balancer“, виждам го да показва инсталираната топология на стелажа, свръхизползвани и недостатъчно използвани възли, пише „Трябва да преместите 5 TB, за да направите клъстера балансиран“ и „Реших да преместя 10 GB байта от...
2100 изгледи
schedule
30.11.2023
Как да проверите версията на Spark
както е озаглавено, как да разбера коя версия на spark е инсталирана в CentOS?
Текущата система е инсталирала cdh5.1.0.
111405 изгледи
schedule
07.11.2023
PIG : Колони в редове
Имам файл, който съдържа това:
id_v^id_f^id_s1,id_s2,id_s3,id_s4
id_v1^id_f1^id_s2,id_s3,id_s4
id_v2^id_f2^id_s2,id_s1,id_s4
този файл е csv, разделен с "^". искам да го нормализирам по този начин с помощта на прасе:
id_v^id_f^id_s1...
49 изгледи
schedule
22.02.2024
Проследяването на работа не се стартира
Инсталирам CDH4.6.0 с помощта на jps
Namenode
Datanode
Secondary Namenode
Tasktracker
2.html " rel="nofollow">този сайт Пускам start-all.sh за стартиране на услуги.
/etc/init.d/hadoop-hdfs-namenode start...
1428 изгледи
schedule
25.03.2024