Впервые в отрасли: Teradata выпускает платформу с открытым исходным кодом Kylo для быстрого создания и управления конвейерами данных

Корпорация Teradata (индекс NYSE: TDC), ведущий разработчик решений в области аналитики, сообщила сегодня о новом важном вкладе в разработку программного обеспечения с открытым исходным кодом. Kylo позволит компаниям, создающим озера данных, добиться высокого уровня эффективности. Teradata представляет Kylo, программную платформу для управления озерами данных, созданную с использованием разработок на основе открытого исходного кода - Apache Hadoop, Apache Spark и Apache NiFi. Kylo представляет собой спонсируемый корпорацией Teradata проект с открытым исходным кодом, доступный по лицензии Apache 2.0. Решение Kylo создано на основе кода, полученного в результате успешной реализации проектов озер данных, выполненных принадлежащей Teradata компанией Think Big Analytics, которая будет обслуживать и поддерживать проекты с использованием Kylo.

Обладая большим опытом разработки решений, способных обеспечить экономические преимущества для бизнеса с помощью озер данных, Teradata представляет платформу Kylo. Платформа помогает организациям решить основные проблемы, с которыми они сталкиваются при внедрении озер данных.

Одна из ключевых проблем заключается в том, что создание озер данных занимает слишком много времени, а учитывая, что цикл их разработки составляет в среднем 6-12 месяцев, пользователи обнаруживают, что предлагаемые варианты использования утрачивают свои актуальность и значение для быстро развивающегося бизнеса. Во-вторых, несмотря на снижение стоимости программного обеспечения, расходы на разработку быстро растут. В заключение, созданное озеро данных может не вызвать интереса у пользователей из-за трудности работы с ним, и поэтому возможности остаются нереализованными.

Платформа Kylo, разработанная с учетом практики внедрения озер данных в различных отраслях, помогает решить эти проблемы, поскольку интегрирует и упрощает процесс разработки конвейеров и общие задачи управления данными. А это, в свою очередь, способствует сокращению периода окупаемости, более быстрой адаптации пользователей и повышению производительности разработчиков. При работе с Kylo программирование не требуется, а интуитивный пользовательский интерфейс платформы для самостоятельного получения, обработки и подготовки данных для их последующего анализа позволяет ускорить процесс разработки. Еще одним преимуществом решения Kylo являются шаблоны, способствующие повышению производительности.

"Многие организации считают, что реализация решений для обработки больших данных в Hadoop - сложный процесс. Технологии больших данных ориентированы в основном на инженеров и разработчиков программного обеспечения, а также на системных администраторов, - говорит Ник Руда, старший аналитик компании Enterprise Strategy Group (ESG). - Наше исследование показало, что 28% организаций продолжают испытывать трудности с привлечением в свой штат достаточного числа бизнес-аналитиков и специалистов по анализу данных, не говоря уже о специалистах по работе с большими данными и приложениями с открытым исходным кодом. 77% респондентов указывают, что период, необходимый для получения коммерчески существенной отдачи от новых инициатив в области больших данных, составляет от 7 месяцев до 3-х лет. Так не должно быть. Я высоко ценю идею Teradata сделать платформу Kylo™ открытой. Это инновационный и важный вклад".

Вобрав в себя практический опыт реализации свыше 150 озер данных, Kylo помогает организациям решать основные проблемы, с которыми они сталкиваются при внедрении озер данных, в том числе:

Решение этих проблем открывает для бизнеса широкие перспективы. Teradata уже помогла многим организациям сэкономить средства и создать новые источники дохода благодаря использованию озер данных:

"Kylo - новый перспективный продукт с открытым исходным кодом для управления озерами данных, идеально отражающий взгляды компании Teradata на большие данные, аналитику и открытое программное обеспечение, - говорит Оливер Рацесбергер, исполнительный вице-президент и директор по развитию продуктов компнаии Teradata. - Teradata обладает богатым опытом в области создания множества проектов с открытым исходным кодом, включая Presto, и Covalent. Мы знаем, как совместить коммерческое и открытое ПО, поэтому мы берем лучшее из обоих миров и в рамках нашей стратегии, основанной на запросах клиентов, внедряем новые подходы к открытому ПО, совершенствуя среду коммерческого и открытого ПО в общих интересах".

Клиенты, которые реализуют бизнес-потенциал благодаря использованию продуктов Teradata, высоко ценят возможности объединения коммерческого и открытого ПО.

"Мы в Discover Financial Services стремимся к тому, чтобы максимально эффективно использовать передовые технологии, которые помогают нам ускорить процесс вывода продуктов на рынок и одновременно обеспечить высочайший уровень обслуживания клиентов. Kylo содержит уникальную среду, ускоряющую процесс разработки и извлечения пользы из новых источников данных, использующих Apache NiFi, - сообщил Ка Танг, директор по вопросам корпоративной архитектуры данных. - Kylo открывает возможности для использования новых продуктов с открытым исходным кодом".

"Программное обеспечение с открытым исходным кодом представляет интерес для пользователей, целью которых является независимость, совместное обучение, возможность экспериментировать и способность быстро адаптироваться при внедрении индивидуальных решений, - указал Рик Фарнелл, президент компании Think Big, входящей в корпорацию Teradata. - Мы помогаем компаниям в создании масштабируемого озера данных, способного последовательно совершенствоваться параллельно с развитием их бизнес-целей, технологических данных и аналитики. Мы устраняем препятствия на пути использования данных в решении сложных бизнес-задач, призывая пользователей присоединиться к растущему сообществу Kylo. В перспективе, основная цель компании заключается в оказании нашим клиентам поддержки в создании конкурентоспособного будущего для их бизнеса благодаря использованию аналитики, а не стандартных ресурсов. Платформа Kylo вкупе с нашим подходом к приложениям и услугам Teradata Everywhere - это отличный пример нашей инновационной стратегии будущего".

К настоящему времени одна из крупных телекоммуникационных компаний внедрила платформу Kylo после того, как группа из 30 ее разработчиков потратила несколько месяцев на написание программного кода конвейеров получения и обработки данных. С помощью Kylo одному человеку потребовалось менее недели на получение, очистку, классификацию и оценку того же самого объема данных. Платформа Kylo не только позволила повысить эффективность обработки данных, но и дала возможность остальным специалистам-разработчикам сосредоточиться на решении других важных бизнес-задач.

Программное обеспечение, документация и учебные материалы по Kylo доступны через сайт проекта Kylo: www.kylo.io - или сайт GitHub.

При необходимости, компания Think Big оказывает следующие дополнительные услуги:

"Kylo предлагает инструментальные средства в дополнение к инструментам, доступным в приложении Apache NiFi, что ускоряет и упрощает перенос данных в ваше озеро данных, - сообщил Скотт Гнау, технический директор компании Hortonworks. - Hortonworks с удовольствием объявляет о сертификации платформы Kylo в Hortonworks DataFlow, а также о расширении нашей совместной поддержки приложения NiFi."

Корпорация Teradata будет обеспечивать общее руководство и управление, а также курировать формирование сообщества пользователей приложения с открытым исходным кодом Kylo.

www.kylo.io  и  github.com