Равиль Байрамгалин, Big Data и Ruby
Big Data — не только модные слова для стартап буллшит-бинго, но и реальная головная боль для многих инженеров в интернет-бизнесе. Инженеры популярных интернет-проектов, еще не озадаченные проблемой обработки большого объема данных, скорее всего столкнутся с ней в самое ближайшее время.
Для масштабирования вычислений на несколько машин есть множество Big Data фреймворков. Без опыта и должного погружения в тему сложно понять, какие задачи они решают, и чем отличаются в работе — чтобы сделать правильный выбор. Чтобы понять, в каком направлении движутся эти фреймворки и что они дают, я расскажу:
— зачем необходима локальность данных;
— почему эти фреймворки построены на dataflow;
— в чем заключается лямбда архитектура и как ее упростить;
— как мы в Oh My Stats эспериментировали с реактивной абстракцией для вычислений.
Среди конкретных фреймворков будут упомянуты ставшие уже классическими Hadoop и Storm (и как их использовать из Ruby), а также в чем преимущества модных Summingbird, Spark и парочки других альтернатив.
И, наконец, я расскажу, почему для Oh My Stats мы решили написать свой фреймворк для пересчета на чистом Ruby (Flow.rb), какие цели мы при этом преследовали, и что у нас получилось.
Что делает видео по-настоящему запоминающимся? Наверное, та самая атмосфера, которая заставляет забыть о времени. Когда вы заходите на RUVIDEO, чтобы посмотреть онлайн «Равиль Байрамгалин, Big Data и Ruby», вы рассчитываете на нечто большее, чем просто загрузку плеера. И мы это понимаем. Контент такого уровня заслуживает того, чтобы его смотрели в HD 1080, без дрожания картинки и бесконечного буферизации.
Честно говоря, Rutube сегодня — это кладезь уникальных находок, которые часто теряются в общем шуме. Мы же вытаскиваем на поверхность самое интересное. Будь то динамичный экшн, глубокий разбор темы от любимого автора или просто уютное видео для настроения — всё это доступно здесь бесплатно и без лишних формальностей. Никаких «заполните анкету, чтобы продолжить». Только вы, ваш экран и качественный поток.
Если вас зацепило это видео, не забудьте взглянуть на похожие материалы в блоке справа. Мы откалибровали наши алгоритмы так, чтобы они подбирали контент не просто «по тегам», а по настроению и смыслу. Ведь в конечном итоге, онлайн-кинотеатр — это не склад файлов, а место, где каждый вечер можно найти свою историю. Приятного вам отдыха на RUVIDEO!
Видео взято из открытых источников Rutube. Если вы правообладатель, обратитесь к первоисточнику.