МОСКВА, 20 мар - РИА Новости. "Яндекс" опубликовал исходный код своей платформы по работе с большими данными YTsaurus, над которой работал с 2010 года, платформу может использовать любой желающий, но прежде всего малый, средний и крупный бизнес, сообщили РИА Новости в компании.
"Яндекс" опубликовал исходный код YTsaurus. Это платформа для хранения и обработки больших данных, с которой работает большинство сервисов "Яндекса". Платформа подходит для широкого круга задач, от аналитики до обучения сложных моделей с миллиардами параметров", - заявили в пресс-службе.
В компании пояснили, что поиск строит с помощью YTsaurus поисковый индекс, а беспилотные автомобили используют платформу, чтобы обрабатывать данные о поездках и улучшать свои алгоритмы. Кроме того, платформа управляет суперкомпьютерами "Яндекса", распределяя нагрузку так, чтобы их вычислительные мощности использовались наиболее эффективно. Также платформа легко масштабируемая и отказоустойчивая.
"Яндекс ведет разработку YTsaurus - или YT, как мы называем ее внутри - с 2010 года. Мы начали строить собственную экосистему для больших данных, потому что ни одно из имевшихся на рынке решений не удовлетворяло всем нашим требованиям", - подчеркнул руководитель отдела технологий распределённых вычислений Максим Бабенко.
"YTsaurus можно использовать как классическую MapReduce-систему, но при этом она поддерживает и другие популярные подходы к обработке данных - например, у нее есть интеграции с ClickHouse и Apache Spark. .... Исходный код и документация YTsaurus доступны на GitHub. Код распространяется под лицензией Apache 2.0. Использовать платформу или доработать ее под себя может любой желающий", - добавили в компании.
"Наибольшую пользу YTsaurus может принести крупным компаниям, которые обрабатывают гигантские объемы данных на тысячах серверов в условиях постоянно возрастающей нагрузки", - добавил руководитель Yandex Cloud Алексей Башкеев. В пресс-службе также уточнили, что решение пригодится "всем, кто работает с большими данными, рядовым пользователям скорее нет, а вот малому и среднему бизнесу - вполне, если у них есть достаточно задач и мощностей".
При перепечатке и цитировании (полном или частичном) ссылка на РИА "Новости" обязательна. При цитировании в сети Интернет гиперссылка на сайт http://ria.ru обязательна.
Комментарии отключены.
