top of page

Интеграция информационных систем. Борьба с неконсистентными данными.

Обновлено: 10 апр. 2021 г.

Коллеги, привет! Меня зовут Бравин Илья, и сегодня я хочу поделиться с вами своим опытом использования Open Source решения Apache Zeppelin для упрощения и ускорения процесса выявления неконсистентных данных в интегрированных системах с различными базами данных.

Также расскажу, как мы выстроили процесс работы с неконсистентными данными.


О чем будет статья

  1. Кратко о себе и компании, в которой работаю.

  2. О неконсистентных данных в энтерпрайз системах простым языком.

  3. 4 причины появления неконсистентных данных.

  4. Первый случай выявления неконсистентности.

  5. Как мы находили неконсистентность, что нас не устраивало и к чему пришли.

  6. Вы узнаете, почему мы выбрали именно Apache Zeppelin как решение для частичной автоматизации процесса поиска неконсистентности.

  7. Покажу реальный пример работы с Apache Zeppelin.

  8. Расскажу про кейсы, когда данный инструмент может быть полезен вам.

  9. Дам список ссылок на полезную литературу по работе и установке Apache Zeppelin.


Кому будет полезен материал?

В первую очередь бизнес-аналитикам и системным аналитикам из IT-индустрии, работающими с Энтерпрайз системами в разрезе данных там, где присутствует одно или сразу оба условия одновременно:

а) Все системы/модули/сервисы интегрированы между собой через синхронизацию данных

б) Данные в системах хранятся в различных БД (например, MySQL и PostgreSQL или Oracle Database, Elasticsearch)



Вводная часть