AWS Kinesis Firehose и аналитика данных

Если я использую Kinesis Firehose, который записывает, скажем, S3, в качестве источника для Data Analytics, можно ли будет сохранить исходные данные из потока, как если бы после Firehose не было интегрированного Data Analytics? Или исходные данные, поступившие в поток, будут потеряны, и все, что у меня будет, будет выведено на этапе аналитики?


person Vladyslav Usenko    schedule 11.05.2019    source источник


Ответы (1)


Данные, передаваемые через пожарный шланг для анализа данных, также будут записаны в целевой каталог вашего пожарного шланга параллельно. Таким образом, любые данные, поступающие в аналитику, также записываются в s3. Это становится вашей резервной копией. Данные, исходящие из аналитики данных, будут подаваться либо в пожарный шланг, либо в поток, либо в лямбду, в зависимости от того, что вы делаете, оттуда они отправляются в другое место назначения.

Итак, на ваш вопрос, будут необработанные данные, а также преобразованные данные в s3 в отдельных каталогах, если пункт назначения для первого пожарного шланга и пункт назначения для аналитики отличаются.

person Nelson Sequiera    schedule 11.05.2019