Большие данные (big data), методы анализа, алгоритмы 2017

МЕНЮ


Новости ИИ
Поиск

ТЕМЫ


Внедрение ИИНовости ИИРобототехника, БПЛАТрансгуманизмЛингвистика, рбработка текстаБиология, теория эволюцииВиртулаьная и дополненная реальностьЖелезоКиберугрозыНаучный мирИТ индустрияРазработка ПОТеория информации

АРХИВ


Апрель 2017
Март 2017
Февраль 2017
Январь 2017
Декабрь 2016
Ноябрь 2016
Октябрь 2016
Сентябрь 2016
Август 2016
Июль 2016
Июнь 2016
Май 2016
Апрель 2016
Март 2016
Февраль 2016
Январь 2016
0000

RSS


RSS новости
птичий грипп

Новостная лента форума ailab.ru

Последние новости

 

Главные новости

2017-04-28 12:10

«Большим данным» и «интернету вещей» пропишут стандарт


анализ больших данных, интернет вещей

Росстандарт создал комитет по техническому регулированию новых технологий Фото: ИЗВЕСТИЯ/Михаил Терещенко

Росстандарт создал комитет для разработки стандартов в сфере «больших данных», «интернета вещей» и «умных городов». Среди его участников — крупные научные и образовательные центры России, технологические компании, некоммерческие организации разработчиков оборудования и программного обеспечения. Комитет обещает лоббировать интересы отечественных производителей в международных

2017-04-24 17:10

Разбор вступительного экзамена ШАД-2015 и воспоминания выпускника 2017 года


большие данные



Введение В мае далёкого 2015 года я заканчивал бакалавриат факультета общей и прикладной физики МФТИ. В основном я занимаюсь квантовой теорией поля, но в тот момент я решил, что хотелось бы больше вникнуть в современный мир компьютерных наук, что можно попробовать совместить МФТИ с ШАД Yandex (две магистратуры). ШАД тогда уже был у всех на слуху, вокруг только и твердили, какой там жёсткий курс алгоритмов, мне понравился сайт (лол), тематика курсов, и я решился поступать. В этом посте я хотел

2017-04-21 19:01

Мастер-класс Как самостоятельно освоить Мachine Learning и Big Data | Станислав Ким


большие данные

Мастер-класс руководителя разработки в отделе развития платежей «Сбербанк-Технологии» Станислава Кима — «Как самостоятельно освоить Мachine Learning и Big Data»

Станислав расскажет, как он проделал путь от java-разработчика до специалиста по Мachine Learning и Big Data. И как это можно сделать самостоятельно.Что нужно знать и уметь на старте, чтобы максимально быстро и эффективно начать разбираться в больших данных и машинном обучении. Как понять, где лучше и выгоднее учиться — обзор

2017-04-20 18:24

Big Data Thursdays


big data

Первое занятие Big Data Thursdays с экспертом МТС Николаем Трошневым.

2017-04-18 20:21

«Big Data — это понятно и просто» — интервью с руководителем проектов по большим данным в QIWI Сергеем Чеканским


большие данные

Мы взяли интервью у выпускника программы «Специалист по большим данным», руководителя проектов по машинному обучению и большим данным в компании QIWI, Сергея Чеканского, в рамках которого Сергей рассказал об опыте разработки и внедрения кластеров big data, типичном дне Data Scientist-a, а также дал практические советы начинающим аналитикам.

— Привет, Сергей! Приятно видеть, что твоя карьера в Data Science складывается успешно, расскажи, почему ты решил развиваться в области анализа данных и

2017-04-12 11:04

«Интернет-корпорации манипулируют поведением людей». Как меняется жизнь, если вживить в руку биочип


кибер безопасность, анализ больших данных, ИТ-гиганты

Два года назад Евгений Черешнев вживил себе биочип. Он хотел понять, каково быть «устройством» в интернете, и обалдел от результатов. В интервью Hi-Tech Mail.Ru Черешнев рассказал, как входить в метро без проездного и зачем корпорации следят за нашим поведением.

Евгений Черешнев привык, что люди смотрят на его левую руку. Многие знают, что у него под кожей биочип. На ощупь это капсула, как маленькая таблетка. Черешнев

2017-04-12 10:33

Пять мифов о Больших Данных


большие данные

Большие Данные (Big Data) имеют большое значение в мире новейших технологий. Согласно исследованию IDG Enterprise 2016 Data and Analytics Survey, более 70% компаний считают, что Большие Данные способны кардинально изменить способ ведения бизнеса и открыть новые источники доходов, а 53% компаний уже реализуют проекты в сфере Больших Данных, либо планируют реализовать их в ближайший год.

Большие Данные сегодня у всех на устах, но что это такое и как это работает? Несмотря на то, что термин «Big

2017-04-05 13:02

РФ задействует для модернизации блокчейн и Big Data


анализ больших данных, ИИ проекты

Генеральная прокуратура РФ рассматривает возможность модернизации своей работы, используя новейшие интерактивные онлайн-сервисы и другие цифровые технологические решения. Об этом сообщают “Известия”.

По мнению представителя Генпрокуратуры Александра Куренного, внедрение инновационных решений, таких как Big Data и блокчейн, даст возможность ведомству отойти от архаичных подходов и кардинально перестроить систему управления.

Новая концепция разрабатывается совместно с Центром

2017-04-04 07:23

donnemartin / data-science-ipython-notebooks


методы машинного обучения, большие данные

Подборка материалов для тех, кто уже познакомился с Python и хочет двигаться в сторону машинного обучения:

Машинное обучение и анализ данных:

— Постоянно обновляющаяся подборка по глубинному обучению, Big Data, Scikit-learn, Kaggle и другим связанным вещам: https://vk.cc/4CaTnD

— Изучаем статистику, необходимую для анализа данных: https://vk.cc/6q3dfc

— 18 полезных библиотек для анализа данных в Python: /

— Предсказываем ценны на недвижимость при помощи линейной регрессии,

2017-04-03 13:53

Хайп вокруг Биг даты — анализа гигантских объемов информации, образующих «нервную систему» планеты — дошёл и до России


анализ больших данных

Хайп вокруг Биг даты — анализа гигантских объемов информации, образующих «нервную систему» планеты — дошёл и до России. Местные операторы и провайдеры хотят создать «Ассоциацию больших данных», независимую от государства.

Крупнейшие российские операторы и провайдеры, включая «Ростелеком», «МегаФон», МТС, «ВымпелКом», Mail.Ru Group и «Яндекс», собираются создать саморегулируемую организацию по управлению Big Data, они же «большие данные» — анализу огромных объёмов информации для получения

2017-04-01 20:05

Как FinTech использует большие данные — хрестоматийные примеры


анализ больших данных



Распространение технологии Big Data революционно меняет формат взаимодействия между потребителями и продавцами по всех сферах жизни. Ритейл, медицина, транспорт, страхование, банковская сфера — чем больше компания знает о потребителе, тем быстрее и быстрее продает услугу.

Анализ больших данных помогает больше узнать о предпочтениях клиентов, дает возможность сделать персонализированное предложение и рекомендовать товар или услугу, которые нужны здесь и

2017-03-31 21:40

Стратегия точечных продаж


большие данные

Термин Big Data — большие данные — стал популярным несколько лет назад. Все больше компаний используют в своей работе аналитику, основанную на сложных математических моделях.

В феврале 2012 года в The New York Times вышла статья под заголовком «Как компании узнают ваши секреты». Ее автор Чарльз Дахигг буквально разворошил осиное гнездо — он рассказал, как сотрудник отдела статистики сети Target Эндрю Пол разработал систему, которая позволяет пред­у­­гадывать потребности клиентов. Например,

2017-03-27 15:04

Культура и креативная экономика


big data

Культура и креативная экономика

Почему бы просто не изучать искусство дистанционно? Вузовское образование — это среда, язык, на котором ты разговариваешь. Для молодежи важнее, не у кого они учатся, а с кем: «Ой, помнишь мы учились с тобой, давай что-нибудь придумаем!».

Наши бабушки и мамы чётко знали, «как надо». Сейчас единого пути нет. В последние 15-20 лет появляются гибкость и многообразие сценариев. У творческих людей, которые не стали Улановыми, есть миллион возможностей.

2017-03-26 22:02

1. Анализ данных. Введение в python | Технострим


big data

Курс «Введение в анализ данных» от Техносферы Mail.ru Group.

Цель курса — познакомить слушателей со сферой анализа данных, основными инструментами, задачами и методами, с которыми сталкивается исследователь данных в работе.

Несколько материалов вам в помощь:

— 18 полезных библиотек для анализа данных в Python: /

— Алгоритмы интеллектуального анализа данных: /

В этом курсе:

1. Введение в python.

2. Advanced Python.

3. Библиотеки Python.

4. Визуализация,

2017-03-26 14:05

001. Вводная лекция - К.В. Воронцов


анализ больших данных

Курс "Машинное обучение" (К.В. Воронцов)

1. Вводная лекция

2. Метрические методы классификации

3. Логические алгоритмы классификации

4. Линейные методы классификации: метод стохастического градиента

5. Линейные методы классификации: метод опорных векторов

6. Методы восстановления регрессии

Лектор: Константин Вячеславович Воронцов, старший научный сотрудник Вычислительного центра РАН. Заместитель директора по науке ЗАО "Форексис". Заместитель заведующего кафедрой

2017-03-26 12:59

В Университете Вашингтона стартует курс «Булшит в эпоху Big Data»


большие данные



Слово «Булшит» (bullshit) можно перевести как «чушь», «чепуха» или «ложь», но двое профессоров Университета Вашингтона вполне органично вписали его в свой предмет. Все 160 мест на курс«Определяем булшит в эпоху Больших данных» заняли в первую же минуту после старта онлайн-регистрации. В чем суть курса? Если верить учебному плану, к его завершению студент научится отличать фейки от новостей и убедительно объяснять «тетушке на гомеопатии или дядюшке-расисту, почему то или иное

2017-03-26 08:45

Что может Big Data в рекламе?


анализ больших данных



Высокоточное профилирование, скоринг пользователей, распознавание лиц, определение мотивов потребителей, выявление связей между людьми и агентов влияния в группах — это далеко не все, на что способны «большие данные». Обо всем этом в лектории BBDO Moscow рассказал генеральный директор SocialDataHub Артур Хачуян.

Открытые данные, которые в своей работе использует SocialDataHub, — это все то, до чего можно «дотянуться» без логина и пароля: открытые профили в соцсетях, поисковая выдача,

2017-03-22 23:15

Машинное обучение в Avito. Видеозаписи со встречи кейс-клуба Data Science 14 марта


введение в машинное обучение, big data

На прошлой неделе прошла встреча кейс-клуба Data Science, на которой специалисты Avito рассказали о том, какие бизнес-задачи сервиса решаются с помощью машинного обучения. В частности поговорили про рекомендации, контекстную рекламу и модерацию. Под катом больше подробностей о встрече и видеозаписи докладов.

Кейс-клуб Data Science в Avito — это уже третья встреча, организованная преподавателем ФКН ВШЭ Петром Ромовым для студентов, обучающихся на факультативе «Машинное обучение в индустрии». Мы

2017-03-15 20:20

Лекция 10: Общие сведения о языке R. Основные функции


big data

Введение в аналитику больших массивов данных

Часть вторая (2/3)

Первая часть https://vk.com/businessanalysts?w=wall-68151244_1339



10. Общие сведения о языке R. Основные функции

11. Синтаксис

12. Типы данных

13. Weka

14. Визуализация

15. R как инструмент Data Mining

16. Решение задач Data Mining. R и Hadoop

17. Основные библиотеки для Data Mining

18. Возможности библиотеки Pandas

19. Зачем нужны новые

2017-03-14 22:19

Как хеджфондовый миллиардер организовал Brexit и победу Трампа


большие данные, анализ социальных сетей

В прошлом году в мире глобальной политики прошли два события, не предсказанные ни самой именитой и самой высокооплачиваемой социологией, ни качественной прессой – если после прошлогодних выборов в США можно считать, что на планете осталась качественная пресса… Brexit и победа Трампа были неожиданностями. По той причине, что породившие их процессы оказались ненаблюдаемыми для традиционных методов. А вот средства работы с большими данными их обнаружили и позволили эффективно

2017-03-14 11:15

9 языков для Big Data


анализ больших данных, разработка по

Мир IT и не только поглощен обработкой беспредельного количества данных. Будь то социальные сети или научная информация — везде требуются инструменты, значительно превышающие по возможностям устаревшие программы, вроде Excel. Требуются принципиально иные подходы и совершенные алгоритмы для их реализации. Вот 9 языков, с помощью которых работа с Big Data доставит вам чуть меньше головной боли.

Если достаточно образованного программиста

2017-03-10 16:30

Введение в когнитивный анализ данных


анализ больших данных

Big Data

Лекция 5: Введение в когнитивный анализ данных

Лекция 6: Классификация задач. Функция конкурентного сходства

Лекция 7: Разработка алгоритмов на базе FRiS-функции

Лекция 8: Информативность и выбор признаков

Лекция 10: Общие сведения о языке R. Основные функции

Лекция 11: Синтаксис

Лекция 12: Типы данных

Лекция 13: Weka

Лекция 14: Визуализация

Лекция 15: R как инструмент Data Mining

2017-03-05 19:04

Big Data, или Большой брат следит за тобой


большие данные, Угроза искусственного интеллекта

В ряду терминов цифрового новояза (blockchain, bitcoin, big data, virtual corporation, peering net и т.д.) термин big data (большие данные) относится к числу немногих, имеющих вполне достоверную дату рождения - 3 сентября 2008 г., когда вышел специальный номер старейшего британского научного журнала Nature, посвящённый поиску ответа на вопрос «Как могут повлиять на будущее науки технологии, открывающие возможности работы с большими объемами данных?»

Вообще, проблема работы с большими

2017-03-03 21:25

Сеть магазинов узнала о беременности девушки раньше чем она сама


большие данные

В 2012-м году многих удивила новость о том, что американская торговая сеть Target узнала о беременности девушки раньше, чем её отец. «Она ещё в школу ходит, а вы посылаете ей купоны на детскую одежду и памперсы?», — кричал тогда рассерженный отец.

Действительно, дочь разгневанного мужчины была школьницей, и поэтому в ответ на крики отца по поводу такого инцидента работники магазина просто извинились. Однако потом выяснилось, что девушка и в самом деле была в положении, даже сама того в

2017-03-01 01:55

Чем концепция "Big Data" отличается от концепции единой интегрированной информационной модели Norio


анализ больших данных

Чем концепция "Big Data" отличается от концепции единой интегрированной информационной модели Norio Okino?

В 1983 году японским учёным Norio Okino была сформулирована концепция единой информационной модели.Концепция единой информационной модели заключается в наличии общей информационной базы к которой обращаются все объектно-ориентированные приложения на протяжении жизненного цикла изделия."Big Data" по сути не заменяет концепцию интегрированной информационной модели жизненного цикла изделия,
 

2017-04-26 16:49

«На любую задачу мы смотрим как на математическую»


методы машинного обучения, большие данные



Специалист по компьютерным наукам Михаил Беляев о том, когда человек сможет управлять устройствами с помощью силы мысли.

Анализ данных и машинное обучение — это не только распознавание улыбок в камерах смартфонов и показ товаров в зависимости от предпочтений покупателя. Большие данные помогают компаниям сэкономить деньги и время на разработке высокотехнологичной продукции, победить неизлечимые болезни и помочь парализованным людям общаться с миром.

Научный сотрудник «Сколтеха» Михаил

2017-04-23 21:00

«Максимальный репост»


изучение социальных сетей, анализ больших данных, чатбот

Как социальные сети победили нашу способность отличать правду от лжи

Способны ли социальные сети искажать наше представление о реальности? Почему мы склонны доверять своим друзьям даже в тех случаях, когда они делятся с нами ссылками на непроверенные сообщения, а то и на прямую дезинформацию? И как эта доверчивость влияет на наши поступки в реальном мире — например, на наше решение проголосовать за того или иного кандидата в президенты? Читайте об этом в статье профессора компьютерных

2017-04-23 20:46

Артур Хачуян: «Настоящая Big Data в рекламе»


анализ больших данных

Познавательная лекция о том, как действительно работает Big Data в рекламе сегодня. Можно извлечь кучу идей для своих проектов! ?

2017-04-17 20:40

Data science и качественный код


большие данные



Обычно модели машинного обучения строят в jupyter-ноутбуках, код которых выглядит, мягко говоря, не очень — длинные простыни из лапши выражений и вызовов "на коленке" написанных функций. Понятно, что такой код почти невозможно поддерживать, поэтому каждый проект переписывается чуть ли не с нуля. А о внедрении этого кода в production даже подумать страшно.

Поэтому сегодня представляем на ваш строгий суд превью python'овской библиотеки по работе с датасетами и data science моделями. С ее

2017-04-08 12:15

[Как работает прогрессивная персонализация]


анализ больших данных

Многие думают так: прикрутили к интернет-магазину персонализацию и успокоились. Она продает, вы считаете деньги. Внутри у этих самых персонализированных товарных рекомендаций вращаются неведомые механизмы Big Data — но, мол, они лучше знают, что предложить покупателю. Так ли это? А вот и нет. Одной Big Data недостаточно для хорошей персонализации. Почему? Давайте разберем этот вопрос на примере этой статьи.Порой Big Data рекомендует абсолютно правильные с точки зрения ее «большой» логики,

2017-04-05 18:16

Как полюбить машинное обучение и перестать страдать


анализ больших данных, python и машинное обучение

Наше будущее все больше становится связано с развитием искусственного интеллекта. Кто-то считает, что это конец эры человечества, а кто-то садится, проходит курсы и пилит код, чтобы разобраться с машинным обучением. Я отношусь ко второй категории. В свое время, когда я задумывалась об освоении этой науки и начала проходить первые курсы, хотелось опустить руки. Сложности материалов и страданиям, казалось, нет предела. Сейчас, с высоты своего опыта, я понимаю, что всего этого можно было бы

2017-04-03 18:10

Открытый курс машинного обучения. Тема 6. Построение и отбор признаков


методы машинного обучения, Кластеризация, реализация нейронной сети, большие данные



Сообщество Open Data Science приветствует участников курса!

В рамках курса мы уже познакомились с несколькими ключевыми алгоритмами машинного обучения. Однако перед тем как переходить к более навороченным алгоритмам и подходам, хочется сделать шаг в сторону и поговорить о подготовке данных для обучения модели. Известный принцип garbage in – garbage out на 100% применим к любой задаче машинного обучения; любой опытный аналитик может вспомнить примеры из практики, когда простая модель,

2017-03-21 06:43

Открытый курс машинного обучения. Тема 4. Линейные модели классификации и регрессии


большие данные, методы машинного обучения, реализация нейронной сети

Сегодня мы детально обсудим очень важный класс моделей машинного обучения – линейных.

Ключевое отличие нашей подачи материала от аналогичного в курсах эконометрики и статистики – это акцент на практическом применении линейных моделей в реальных задачах (хотя и математики тоже будет немало).

Пример двух таких задач – это соревнования Kaggle Inclass по прогнозированию популярности статьи на Хабре и по идентификации взломщика в Интернете по его последовательности переходов по сайтам. Домашним

2017-03-19 16:06

Лекция 1: Задачи Data Mining


Кластеризация, big data

Алгоритмы интеллектуальной обработки больших объемов данных

1. Задачи Data Mining

2. Задача кластеризации и ЕМ-алгоритм

3. Различные алгоритмы кластеризации

4. Задача классификации

5. Обработка текстов, Naive Bayes

6. Линейные модели для классификации и регрессии

7. Машина опорных векторов

8. Методы снижения размерности пространства

9. Алгоритмические композиции

Все 13 лекций доступны по ссылке:

https://vk.com/videos-54530371?section=album_56085995

2017-03-15 22:28

Mail.Ru Group будет продавать исследования о своих пользователях


big data

Офис Mail.Ru Group

О проекте Research.Mail.Ru, который российский интернет-холдинг Mail.Ru Group запускает 16 марта вместе с консалтинговой компанией EmCo, партнеры рассказали на брифинге в среду, 15 марта.

В его основе — использование технологии big data (то есть анализа больших объемов данных) применительно к массивам данных пользователей всех проектов Mail.Ru Group, включая «Почта@Mail.ru», «Игры@Mail.ru», собственно портал Mail.ru,

2017-01-24 10:34

«Big Data — это большие деньги». Как начать зарабатывать на данных


big data



Эксперт в области больших данных провел лекцию для студентов Университета Иннополис и рассказал, почему Big Data важна для бизнеса и кому сейчас данные нужнее.

Большие данные нужны всем

Когда у вас есть данные, вы придумаете, как их монетизировать. Я не могу представить компании, которым большие данные не нужны. Есть компании, у которых своих данных настолько мало, что на них аналитики не построишь. Но можно ведь их закупать? 

Всем компаниям нужно подумать,

2017-01-11 13:12

Машинное обучение — это легко


модели машинного обучения, большие данные

В данной статье речь пойдёт о машинном обучении в целом и взаимодействии с датасетами. Если вы начинающий, не знаете с чего начать изучение и вам интересно узнать, что такое «датасет», а также зачем вообще нужен Machine Learning и почему в последнее время он набирает все большую популярность, прошу под кат. Мы будем использовать Python 3, так это как достаточно простой инструмент для изучения машинного обучения.

Для кого эта статья? Каждый, кому будет интересно затем покопаться в истории за

2016-12-12 21:07

В эпоху Big Data Оруэлла пора переписывать


большие данные

Больше всего информации о нас собирают корпорации, но государство их скоро догонит. Эксперт Иван Бегтин — о том, как это устроено

Википедия определяет Большие данные (англ. Big Data) в информационных технологиях как «совокупность подходов, инструментов и методов обработки структурированных и неструктурированных данных огромных объемов и значительного многообразия».

Википедия и сама по себе проект эпохи Больших данных, где они отлично структурированы и потому работать с ними может любой

2016-12-10 02:01

Big Data. Кто сделал Трампа президентом?


искусственный интеллект, большие данные

Современное общество все больше погружается в цифровой мир и это неизбежно ведет к созданию огромных массивов информации, которые на первый взгляд нельзя использовать для практических задач из-за их объема. Но человек придумал для этих целей самоокупаемые машины? Которые могут творить с этой информацией всею И если вчера искусственный интеллект обучали водить машину и распознавать слова, то сегодня его уже научили выигрывать избирательные кампании и выбирать президентов в США.

2016-12-07 02:02

Расследование Das Magazin: как Big Data и пара ученых обеспечили победу Трампу и Brexit


большие данные

В субботу швейцарский журнал Das Magazin опубликовал расследование о том, как технологии персонализированной рекламы в сети Facebook повлияли на итоги выборов в США и референдума о выходе Великобритании из ЕС. Как отмечает немецкий Spiegel, многие журналисты уже стали называть расследование «текстом года». В нем есть все: и новейшие технологии; и универсальное оружие, которое попало из хороших рук в плохие; и ежедневная слежка за каждым из нас; и таинственные заказчики; и превращение

2016-12-03 14:54

Актуальная математика: Математика в нейронных сетях


Семинары, большие данные, искусственные нейронные сети

"10 лет назад появился новый класс нейронных сетей — так называемые глубинные сети, и они творят чудеса. Но почему и как работает этот чисто эвристический подход, до сих пор не понимает никто. На самых престижных конференциях по анализу данных организуются круглые столы для обсуждения того, какие fundamentals лежат в их основе, но ответа пока нет. Может быть, этим не заинтересовались действительно великие математики, может быть, чего-то не хватает в самой математике, требуется новый язык,

2016-12-02 16:15

Касперская объяснила своё предложение о передаче «больших данных» россиян государству


новости ит, большие данные, Угроза искусственного интеллекта



Гендиректор компании InfoWatch Наталья Касперская на странице в Facebook подробно объяснила своё заявление о необходимости передать контроль над «большими данными» россиян государству. По её словам, пользователи не могут сами заниматься решением этого вопроса, а сервисы, которые получают эти данные, не заинтересованы в регулировании.

К «большим данным» (big data) пользователей Касперская относит «всю информацию, собираемую поисковиками, приложениями, мобильными устройствами и прочими:

2016-11-17 12:57

Расшифровка вебинара о Big Data


big data

Представляем вам текстовую версию выступления Григория Мирошникова, одного из ведущих российских специалистов в области больших данных, работающего Big Data Product Manager в oneFactor, компании–лидере по развитию сервисов искусственного интеллекта, технологическом партнере «Мегафона». Вебинар назывался “Новая нефть. Как использовать Big Data, чтобы стать цифровым шейхом?”

что такое Big Data,какие бывают примеры применения Big Data, какие бывают типы Big Data команд, какие

2016-11-16 17:25

Сотворение мира Опыт создания разумной жизни своими руками


методы машинного обучения, большие данные, виртуальная реальность

Иногда проводишь день в попытках без использования терминов «рекурсивный вызов» и «идиоты» объяснить главному бухгалтеру, почему на самом деле простое изменение учетной системы затягивается почти на неделю из-за орфографической ошибки, допущенной кем-то в коде в 2009 году. В такие дни хочется пооборвать руки тому умнику, который сотворил этот мир, и переписать все с ноля.

Под катом история о том, как я в качестве практики для изучения Python разрабатываю свою библиотеку для агентного

2016-11-01 00:30

Статистика для математика


big data

В современных условиях интерес к анализу данных постоянно и интенсивно растет в совершенно различных областях, таких как биология, лингвистика, экономика, и, разумеется, IT. Основу этого анализа составляют статистические методы, и разбираться в них необходимо каждому уважающему себя специалисту в data mining.

К сожалению, действительно хорошая литература, такая что умела бы предоставить одновременно математически строгие доказательства и понятные интуитивные объяснения, встречается не очень

2016-10-03 17:56

YT: зачем Яндексу своя MapReduce-система и как она устроена


большие данные, методы машинного обучения, Кластеризация

В течение последних шести лет в Яндексе идет работа над системой под кодовым называнием YT (по-русски мы называем её «Ыть»). Это основная платформа для хранения и обработки больших объемов данных - мы уже о ней рассказывали на YaC 2013. С тех пор она продолжала развиваться. Сегодня я расскажу о том, с чего началась разработка YT, что нового в ней появилось и что ещё мы планируем сделать в ближайшее время.

Кстати, 15 октября в офисе Яндекса мы расскажем не только о YT, но и о других

2016-09-11 21:03

"Опыт участия в Microsoft Malware Classification Challenge" Михаил Трофимов (Machine Learning Works)


большие данные, распознавание образов, методы машинного обучения, искусственные нейронные сети, реализация нейронной сети

Несколько докладов по анализу данных и машинному обучению с недавнего Python Data Science meetup

1. О том, как проанализировать 200 Гб данных на ноутбуке, какие проблемы могут возникнуть в процессе и как автор с ними боролся.

2. Об опыте построения алгоритма классификации изображений автомобилей.

3. Как научить приложение распознавать категории объявлений по изображениям.

2016-06-21 00:05

Лекция 7. Линейный регрессионный анализ. Прогнозирование коротких временных рядов


Семинары, большие данные

Линейный регрессионный анализ: прогнозирование коротких временных рядов.

Прогнозирование на основе регрессионной модели с сезонными индикаторными (фиктивными, структурными) переменными. Тренд, сезонные составляющие, смена характера ряда, выбросы. Логарифмирование - прием для преобразования мультипликативной сезонности в аддитивную. Индикаторные переменные. Переобучение.

Лекция -7 в курсе "Анализ данных на R в примерах и задачах" (весна 2016).

Преподаватель курса: Вадим Леонардович

2016-06-14 17:01

Обзор российских голосовых помощников: «Дуся», «Ассистент на русском», Speaktoit и «Собеседник HD»


ИИ проекты, искусственный интеллект, распознавание образов, большие данные, распознавание речи

Обозреватель vc.ru изучила рынок интеллектуальных ассистентов, описала несколько российских сервисов и опросила экспертов о перспективах речевых технологий.

Мировой рынок интеллектуальных ассистентов с 2012 года по 2014 год вырос с $352 млн до $572,2 млн. К 2020 году ожидается рост рынка до $3,07 млрд, что составит 31% по сравнению с ростом в 2013 году.

Пока одни компании концентрируются на создании виртуальных помощников на веб-страницах, другие уделяют внимание мобильным. На мировом

2016-04-19 13:05

Большие данные [Радио Кузичев]


анализ больших данных

Сейчас всё чаще можно услышать термин «Большие данные». Что такое Большие данные? Где и как они собираются? Где хранятся? Что можно узнать из Больших данных о людях и организациях? Большие данные в социальных сетях - что мы рассказываем или выдаем о себе?

Эфир от 14 апреля 2016 года.

Соведущий:

Российский специалист в области искусственного интеллекта, разработки программного обеспечения

Игорь