• Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку
13.11.2018, 15:24
Редакция Naked Science
916

Разработана новая прогностическая модель на основе больших данных

Команда испанских исследователей разработала надежную модель, использующую меньшие объемы больших данных для точных и эффективных прогнозов.

2-bigdata1
©Wikipedia / Автор: Дмитрий Жуков

Технология развивается гигантскими скачками, а вместе с ней — информация, с которой ежедневно взаимодействует общество. Объем данных должен быть организован, проанализирован и коррелирован для предсказания определенных закономерностей. Это одна из главных функций больших данных.

 

Исследовательская группа KIDS с кафедры информатики и численного анализа Университета Кордовы смогла улучшить модели, предсказывающие несколько переменных одновременно, основываясь на наборе введенных переменных, тем самым уменьшая объем данных, необходимых для точного прогноза. Один из примеров такого прогноза — метод, предсказывающий несколько параметров, связанных с качеством почвы на основе набора переменных, таких как посаженные культуры, обработка почвы и использование пестицидов. Статья об исследовании опубликована в журнале Integrated Computer-Aided Engineering.

 

«Когда вы имеете дело с большим объемом данных, есть два решения. Вы либо увеличиваете производительность компьютера, что очень дорого, либо уменьшаете количество информации, необходимой для надлежащего выполнения процесса», — говорит один из авторов проведенного исследования Себастьян Вентура.

 

При построении прогностической модели надежные результаты зависят от двух факторов: количества задействованных переменных и числа примеров, введенных в систему. Исследователям удалось уменьшить количество примеров, исключив те, что были «шумными» или избыточными, следовательно, не несли никакой полезной информации для создания лучшей прогностической модели.

 

Как отметил ведущий автор исследования Оскар Рейес, они разработали технику, способную указать, какой набор примеров необходим, чтобы прогноз был не только надежным, но и наилучшим. В некоторых базах данных из 18 проанализированных ученые смогли уменьшить объем информации на 80 процентов, не повлияв на прогностическую производительность: другими словами, было использовано меньше половины оригинальных данных.

 

По словам Рейеса, так можно сэкономить энергию и деньги при построении модели, ведь потребуется меньше вычислительной силы. Это сохранит и время, что важно в моделях, работающих в реальном времени, потому что нет смысла создавать модели, выдающие результат раз в полчаса, когда прогноз нужен каждые пять минут.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK
Предстоящие мероприятия
4 июля, 09:30
Любовь С.

Анализ более 150 тысяч древних звезд Млечного Пути показал, что возраст космоса, судя по всему, близок к 13,8 миллиарда лет. Авторы нового исследования заключили, что сценарии, в которых Вселенную приходится делать заметно «моложе» ради решения хаббловского кризиса, плохо согласуются с наблюдениями. Это важно, поскольку возраст старейших светил — один из немногих независимых способов проверить космологические модели не по данным ранней Вселенной, а по объектам нашей собственной Галактики.

4 июля, 17:28
Evgenia Vavilova

Мы много знаем о том, как цивилизации до нас строили дома и дороги, но с объектами материальной культуры дела обстоят сложнее. Ремесленные техники часто хранились в строгом секрете и могли быть случайно утрачены при неудачном стечении обстоятельств. Так случилось с ювелирной техникой цзинь чжэ сы.

3 июля, 12:20
Татьяна Зайцева

Японские исследователи выловили у берегов Окинавы пластиковую бутылку с узким горлышком, внутри которой сидел большой живой краб. В итоге ученые смогли найти ответы на несколько возникших в связи с этой находкой вопросов: как краб попал в бутылку, сколько там находился и как ему удалось выжить?

28 июня, 15:51
Александр Березин

На протяжении десятилетий Тель-Авив воздерживался от этого шага, чтобы не испортить отношения с Турцией. Но после действий Израиля 2023-2026 годов официальная Анкара, как и множество государств мира, неоднократно осуждала Израиль, из-за чего изменилась и его позиция по геноциду.

29 июня, 13:56
ЮФУ

Ученые Южного федерального университета исследовали новую светочувствительную молекулу и обнаружили, что она ведет себя совсем не так, как ожидалось. Благодаря необычным свойствам она может стать основой для создания умных материалов, сенсоров и лекарств, которые будут активироваться светом именно там, где нужно, например, для борьбы с опасными бактериями.

1 июля, 09:42
Игорь Байдов

Авторы нового исследования провели сравнительный анализ видов паукообразных и выяснили, какие эволюционные и биомеханические факторы делают одних пауков быстрыми, а других — медленными. Параллельно ученые выделили из этой группы рекордсмена по скорости перемещения.

10 июня, 11:51
Александр Березин

Хотя длительность помех не превышала десяти секунд, это первый известный случай такого рода. Обычно спутникам не хватает мощности для создания радиосигналов той силы, что нужна для подобных помех.

25 июня, 16:20
Любовь С.

Вселенная может оказаться «замкнутой» глобальной структурой, где свет от далеких галактик способен возвращаться к наблюдателю с разных направлений. Именно такой сценарий не удалось исключить авторам нового масштабного обзора. Проверить его предсказания астрономы смогут уже в ближайшие годы.

25 июня, 15:09
Марк Чернов

Ученые впервые на молекулярном уровне доказали, что обычная вода одновременно состоит из двух разных жидких состояний — более плотного и менее плотного, которые непрерывно сменяют друг друга. Раз молекулярная «двойственность» действительно существует, это подтверждает спорную 30-летнюю гипотезу. Новое открытие поможет, наконец, объяснить десятки «странных» физических аномалий воды, включая ее расширение при замерзании и парадоксальное изменение вязкости под давлением.

[miniorange_social_login]

Комментарии

Написать комментарий