На сайте Microsoft в понедельник опубликована статья под названием «Машинное обучение поможет ускорить революцию больших данных».
«За последнее десятилетие количество продуктов и инструментов, использующих возможности машинного обучения, выросло в разы. В том числе и в продуктах Microsoft. Они позволяют управлять интерфейсом при помощи жестов, распознавать речь и рукописный текст, прогнозировать события и быстро анализировать данные. Все продукты Microsoft последних лет в большей или меньшей степени используют возможности машинного обучения.
Кристофер Бишоп, руководитель Группы по машинному обучению и восприятию в Microsoft Research в Кембридже, выделяет распознавание рукописного текста на планшетных ПК как первый из примеров этого процесса перехода. «Это была первая коммерческая система, имеющая уровень точности распознавания рукописного текста, который можно использовать на практике», — говорит он.
Если тогда это было прорывом, то сейчас существует множество примеров интеллектуальных функций — которые уже воспринимаются, как должное — основанных на машинном обучении. Одна из них — инструмент управления изображениями в Microsoft Office. Функция правки, как говорит Бишоп, удаляет фон с фотографии собаки. «Вы можете вырезать собаку и вставить ее в документ Word — это практически идеальный результат, основанный на компьютерном обучении. Я делаю какие-то действия с изображением в реальном времени, а базовый алгоритм настраивается при просмотре огромного количества изображений».
Проще говоря, для анализа, необходимого для аккуратного удаления фона без обрезания уха у собаки, требуется обработка бесконечного количества статистических данных по объектам вообще и распределению цветов в объектах и фоне. «Это казалось невыполнимой задачей, а сейчас воспринимается, как должное», — замечает Бишоп. Другой замечательный пример продукта Microsoft с машинным обучением в центре технологий — датчик движения и распознавания речи Kinect. Подобным образом, алгоритм предсказания рекламы в поисковом механизме Bing — который используется для оценки вероятности щелчка по рекламному объявлению — также появился благодаря машинному обучению.
Бишоп видит машинное обучение как корзину для множества технологий, которые были разработаны, усовершенствованы, вошли в моду и вышли из нее за последние 30-40 лет, включая искусственный интеллект, интеллектуальные системы, нейронные сети и анализ данных. По сути, все эти технологии поддерживают компьютерные системы, обучающиеся на основании статистического анализа наборов данных. Теперь Бишоп и его команда добавляют новый мощный инструмент Infer.NET, который бесплатно доступен для некоммерческого использования. Он предоставляет каркас для написания программного обеспечения, которое может адаптироваться, обучаться и размышлять, переводя машинное обучение на более высокий уровень, где алгоритмы, масштабируемые до миллионов точек данных будут укрощать, управлять и опрашивать растущий приток Больших данных, формируя начальное понимание и знания.
Революция под управлением данных
«Мы находимся на пороге революции под управлением данных. Для использования этих данных в полном объеме и управления революцией нам нужны новые технологии машинного обучения, которые могут масштабироваться», — говорит Бишоп. Infer.NET обеспечивает такую возможность, позволяя комбинировать детальные знания в предметной области — как показано на графической модели — со статистическим методом байесовского вывода, когда вероятность правильной гипотезы автоматически обновляется при поступлении дополнительных доказательств.
Здесь возможно большее количество допустимых интерпретаций отдельных измерений. Например, при распознавании рукописного текста, «привет» может также интерпретироваться, как «приват» или «привел». В прошлом эти возможности учитывались вручную. При помощи Infer.NET компьютер постепенно обучается. «Сегодня компьютеры оперируют большими объемами информации, но интеллект предоставляет человек. Обучение на основе моделей изменит эту традицию», — говорит Бишоп. Infer.NET сделает возможным написание программного обеспечения для интеллектуальных задач, «когда то, над чем вы работаете, невозможно четко измерить», — добавляет он.
«Большие данные» возникли независимо от машинного обучения, и сегодня можно получить информацию огромных потоков данных, поступающих из социальных сетей, веб-поиска, датчиков состояния окружающей среды, геномики и множества других источников без использования машинного обучения. Примером может быть визуализация данных, такая как наложение преступлений на карту, которая является полезным источником информации для полиции, страховых компаний и продавцов недвижимости.
Однако применение машинного обучения к растущим хранилищам данных приведет к плавному изменению функций, так как это даст возможность просмотра взаимосвязей различных типов данных. Если смотреть с этой точки зрения, слияние машинного обучения и Больших данных может породить новые методы проведения научных исследований и бизнес-аналитики.»
