Аналитика на 100млн. данных. Краткий ликбез для системных интеграторов (Татьяна Бунто, SECR-2018) — различия между версиями

* [https://2018.secrus.org/program/submitted-presentations/analytics-for-100-million/ Talks page on SECR site]
<!-- <blockquote>[©]</blockquote> -->

{{vklink|1280}}                                          
<references/>





<!-- topub -->

[[Категория:SECR-2018]]
[[Категория:Data Analysis]]
[[Категория:Бизнес-анализ]]
{{stats|disqus_comments=3|refresh_time=2018-112-26T19:32:2204T18:14:55.441251563510|vimeo_plays=2637|youtube_plays=0}}

Версия 15:14, 4 декабря 2018

Докладчик

Татьяна Бунто

В энтерпрайз-системах данные накапливаются годами. И вроде простая задача — настроить интеграцию из баз-источников в базу данных вашей системы. Казалось бы, какие могут быть проблемы? Согласуй модель системы, сделай мэппинг. Подвох в том, что все врут! Идеальных данных не бывает! И наша задача отсечь все ненужное и не потерять ценное. А для этого нужно проводить аналитику.

Вишенкой на торте становятся объемы. Перегрузить 100млн данных не равно перегрузке 10млн. Для 100 млн нужно особенно тщательно учитывать специфику модели, дальнейшее предназначение системы и сценарии ее использования,

На каких этапах интеграции систем нужно анализировать данные? Как проверять, зачем? И самое главное — что делать с результатами?

Поделюсь опытом, интересными кейсами и примерами. Дам советы по анализу данных при проектировании интеграции систем.

Доклад будет интересен всем, кто интересуется качеством данных при интеграции систем, хочет привести в порядок БД своей системы, а также тем, кто составляет планы проектов и не понимает, зачем тратить время на такие исследования.

Видео

Презентация

Примечания и ссылки

• Talks page on SECR site

• Discuss on VK

Plays:37   Comments:3