Nifi — когда record-oriented не оправдывает себя

Дата публікації:
10/07/2024 10:01

Постійна адреса новини:
http://www.vsinovyny.com/11122209

Nifi — когда record-oriented не оправдывает себя

10/07/2024 10:01 // Хабрахабр:

Добрый день. Меня зовут Иван Клименко, и я архитектор департамента поддержки продаж компании Arenadata. В основном занимаюсь продуктом Arenadata Streaming (ADS) — это масштабируемая отказоустойчивая система для потоковой обработки данных в режиме реального времени, адаптированная для корпоративного использования и построенная на базе Apache Kafka и Apache NiFi. В продукт входит замечательный сервис Arenadata Streaming NiFi, который является low-code средством построения интеграционных потоков с возможностью масштабирования.

Сегодня хочу показать на одном из практических случаев, что не всегда в NiFi удаётся следовать шаблонному подходу record-oriented в разработке потоков обработки и трансформации данных.

Будет большой JSON, будет Avro-схема, будет JOLT-спецификация.

Интересно?

» Читати повністю

«	Наступна новина з архіву Работа с информерами Java kubernetes client	Попередня новина з архіву У Нікополі під час артобстрілу загинув пенсіонер, є поранені	»