Big Data E2E Demo - Part 1/4 - HBase - Flume - SOLR - REST - Python
The objective of this series is to demo an end-to-end Big Data System integrating multiple technologies and Data Science algorithms. The system is that of a fictitious Book Club site where members enter their ratings and comments on books. The system enters the data into MongoDB, and the Weblog is streamed directly into an online HBase DB which is integrated with SOLR. The users can query the HBase table from Impala in Near-Real-Time. Also, they can use SOLR to index the HBase data. A Python program leverages the REST API for both SOLR and HBase to enable fetching data based on criteria with great speed. This is all in part I. The other parts feature Sentiment Analysis on Twitter feeds using TF-IDF, Lambda architecture implementation using Apache Spark and a Recommendation Engine implementation to recommend books to the club members using Apache Mahout. Then, there is some work on AWS and data visualization using MS Power BI and Tableau. Link to code will be made available. Also, more detailed presentation will be made where there is expressed interest from the viewers.
Что делает видео по-настоящему запоминающимся? Наверное, та самая атмосфера, которая заставляет забыть о времени. Когда вы заходите на RUVIDEO, чтобы посмотреть онлайн «Big Data E2E Demo - Part 1/4 - HBase - Flume - SOLR - REST - Python», вы рассчитываете на нечто большее, чем просто загрузку плеера. И мы это понимаем. Контент такого уровня заслуживает того, чтобы его смотрели в HD 1080, без дрожания картинки и бесконечного буферизации.
Честно говоря, Rutube сегодня — это кладезь уникальных находок, которые часто теряются в общем шуме. Мы же вытаскиваем на поверхность самое интересное. Будь то динамичный экшн, глубокий разбор темы от любимого автора или просто уютное видео для настроения — всё это доступно здесь бесплатно и без лишних формальностей. Никаких «заполните анкету, чтобы продолжить». Только вы, ваш экран и качественный поток.
Если вас зацепило это видео, не забудьте взглянуть на похожие материалы в блоке справа. Мы откалибровали наши алгоритмы так, чтобы они подбирали контент не просто «по тегам», а по настроению и смыслу. Ведь в конечном итоге, онлайн-кинотеатр — это не склад файлов, а место, где каждый вечер можно найти свою историю. Приятного вам отдыха на RUVIDEO!
Видео взято из открытых источников Rutube. Если вы правообладатель, обратитесь к первоисточнику.