Java – один язык, безграничные возможности
Обработка больших массивов данных с использованием Java платформы
Описание: В докладе рассматривается построение инфраструктуры для обработки данных изменчивым набором ресурсоемких алгоритмов. Так, поднимаются вопросы выбора модели для описания задействованых алгоритмов и связи между ними, контроля и оптимизации использования ресурсов, отказоустойчивости системы при использовании native алгоритмов, распределенной обработки с использованием различных средств кластеризации (SGE, Hazelcast, Grid Gain, ZooKeeper). Участники получат полезные советы по контролю и оптимизации использования ресурсов, влиянию различных параметров (таких как реальное и процессорное время, скорость и латентность передачи данных) на скорость работы системы. Также будет обсуждаться вопрос отказоустойчивости при достаточно резких изменениях требований задействованых алгоритов к объему памяти, процессору, использовании native алгоритмов через JNI. Будут представлены варианты распределения задачи, проблемы, возникающие при кластеризации, платформы, задействованные для реализации кластеризации.
Тип выступления: Доклад (60 минут)
Виталий Тимчишин
Киев, Украина
Виталий занимается разработкой и проектированием систем на языке Java более 8 лет. Имеет большой опыт работы с коммуникационными протоколами, базами данных и многопоточными приложениями, является экспертом в разработке и внедрении сложных неоднородных систем. На текущий момент занимается проектированием, разработкой и внедрением Java инфраструктуры для системы анализа массивов данных.