Ученые создали систему искусственного интеллекта для распознавания и удаления ошибок из ваших данных

Мы живем в мире данных. Наши устройства умные, нас окружают роботы , наше окружение полно различных переключателей и датчиков, и наши данные анализируются и используются по-разному.

Тем не менее, люди не учавствуют в этих процессах, и многие из этих данных на самом деле некачественные. Как мы просеиваем это, чтобы найти то, что действительно имеет значение? Ученые Университета Ватерлоо, Университета Висконсина и Стэнфордского университета разработали инструмент под названием Holo Clean, который может распознавать и удалять некачественные данные.

Проблема сбора данных

Некачественные данные - это, по сути, шум, который собирается различными датчиками или алгоритмами. Представьте себе систему, которая анализирует данные ваших сайтов. Он может получить доступ ко всем видам информации, но не все из них актуальны. Фактически, некоторые из них даже не реальны - это шум, который естественным образом возникает во всех электронных системах.

Holo Clean - это первая в мире технология на основе искусственного интеллекта, предназначенная для распознавания неактуальных данных и их исправления перед передачей для обработки. Ученые говорят, что этот инструмент может стать полезным для различных организаций, которые работают с огромными объемами данных. Ученые отмечают, что банки, коммунальные предприятия и многие другие предприятия работают с большим количеством данных.

Неизбежно, что некоторые из них плохие - они могут быть неточными, ложными или просто неуместными. Holo Clean можно научить находить ошибки и исправлять их самостоятельно. Конечно, обучение ИИ само по себе является длительным процессом, но в конечном итоге Holo Clean отделит ошибки и исправит их. Это предоставит пользователям более чистый набор данных для использования в аналитике. Конечной целью является более простой анализ с более точными и надежными результатами.

До сегодняшнего дня неверные данные должны быть идентифицированы и исправлены вручную. Это долгий и дорогой процесс, который даже не совсем точен. Ученые надеются, что Holo Clean сможет ускорить эту работу, сделать ее проще и точнее. Ихаб Ильяс, один из разработчиков Holo Clean, сказал: «Эта система решает проблему, когда информация находится там, и люди используют ее для запуска аналитики, но она не верна. Он не предоставляет информацию, которой там не было, но вместо этого исправляет информацию, которую вы считаете верной».

Заключение

Работа на точных данных чрезвычайно важна. Только так вы можете надеяться достичь точных результатов и принимать осмысленные решения. Это одна из тех работ, которая, вероятно, лучше в руках искусственного интеллекта.

Такая система может быть обучена просеивать большое количество данных, распознавать ошибки и исправлять их, и этот процесс может быть быстрым и точным.