Как сделать каталог spoolind приемником в Flume

Я знаю, как сделать каталог спула исходным кодом в Flume. Я использую каталог spool для копирования файлов из папки в приемник hdfs. Есть ли способ сделать каталог спулинга приемником, чтобы я мог копировать некоторые из моих файлов в локальную папку?


person Kutumb Kutumb    schedule 01.06.2016    source источник


Ответы (1)


File Roll Sink записывает события в файлы в локальной файловой системе. Каталог, в который должны быть записаны события, указывается параметром sink.directory.

#file_roll sink properties
a1.sinks = s1
a1.sinks.s1.type = file_roll
a1.sinks.s1.sink.directory = /path/to/file

Полную документацию по этому приемнику можно найти здесь.

person ninja123    schedule 01.06.2016