Большие данные (big data), методы анализа, алгоритмы 2018

В сегодняшнем выпуске у меня в гостях Data Scientist компании Banuba - Вячеслав Архипов.

Подробно рассказываем об инструментах семейства Jupyter – эффективных средствах разработки для задач Data Science и смежных областей.

Настройка Google Cloud

Лекция 1. Нейронные сети. Теоретические основания (Анализ данных на Python в примерах и задачах. Ч2)

Лекция 2. Нейронные сети в регрессионных задачах (Анализ данных на Python в примерах и задачах. Ч2)

Лекция 3. Примеры решения задач Machine Learning с помощью нейронных сетей. Часть 1

Искусственный интеллект становится неотъемлемой частью медицины. Научный сотрудник лаборатории Philips Research Lab Rus Федор Мушенок рассказал о роли ИИ в патоморфологии.

— Что такое патоморфология и в каких сферах медицины она применяется?

Реляционная модель потеряла свою исключительность

Требования функциональности и структурированности баз данных (БД), наиболее полно реализованные в реляционных системах, сейчас находятся под давлением новых требований.

Каких-то 15 лет назад роли «бизнес-аналитик» на IT-проектах не было. Требования составляли и согласовывали или разработчики, или проектные менеджеры, а то и сам заказчик. Со временем проектов стало больше, а сложность их так увеличилась, что стало ясно: бизнес-анализ – большой, отдельный пласт работы.

Работа с данными — работа с алгоритмами обработки данных.

И мне приходилось работать с самыми разнообразными на ежедневной основе, так что я решил составить список наиболее востребованных в серии публикаций.

Эта статья посвящена наиболее распространённым способам сэмплинга при работе с данными.

По стопам моей первой подборки датасетов для машинного обучения сделаю ещё одну — подборку относительно свежих датасетов с рабочими примерами по обработке данных.

Яндекс получил патент на технологию, позволяющую нейросетям автоматически определять доход пользователей сервисов компании и их профессию. Об этом пишут «Известия» со ссылкой на Роспатент.

Краткая история анализа данных, искусственного интеллекта и машинного обучения | Лектор: Алексей Натекин | Курс: Парсек 2017 | Организатор: Старкон

Мы в будущем. 

Скаут Свен Мислинтат в своем кабинете

Футбольные скауты – таинственные персонажи без имен и фамилий. О них редко говорят, но именно они первое звено глобальной футбольной цепочки: великие карьеры начинаются с того, что великих кто-то обнаружил на заброшенном деревенском поле. 

Data Science оказывается одной из главных причин радикального изменения информационных технологий – а через них, в свою очередь, промышленности и жизни людей в целом.

Big data - это маркетинговый ход, который не учит думать, а всего лишь удачно продаёт систему анализа данных.

Data Science - путь к развитию.

Последнее время язык Scala стал обширно применяться специалистами Data Science. Он приобрел популярность в основном благодаря появлению Spark, который написан на Scala. На практике, часто на этапе исследования анализ и создание модели выполняются в Python, а затем реализуются в Scala, поскольку этот язык больше подходит для production.

Пики прироста ожидаемой продолжительности жизни в России приходятся на годы перед президентскими выборами — так было и в 2011-м, и в 2017-м. Росстат объяснил, что эти факторы никак не связаны — сказываются волны холода и зноя

Фото: Роман Пименов / Интерпресс / ТАСС

Рост перед выборами

И разработал «умного» помощника для фермеров Ida, с помощью которого отдельное европейское хозяйство может увеличить годовую прибыль на €30 тысяч и в два раза реже давать животным антибиотики.

Продукт

Ida — мобильное приложение с «умным» помощником для фермеров, которые специализируются на молочном животноводстве.

В центре внимания на саммите Gartner Data & Analytics 18-19 февраля в Сиднее были расширенная аналитика (Augmented Analytics) и искусственный интеллект.

Конспект материала сайта для предпринимателей, маркетологов, программистов и аналитиков Coriers.

Книги об анализе и обработке данных

Data Science за 3 месяца? В своем ли мы уме? Вполне. Расскажем, как стать аналитиком данных за 12 недель по курсам Microsoft и др.

SPSS — программа, которая используется для статистического анализа и обработки данных. Хотя многие считают R и Python более эффективными для анализа данных, SPSS все еще остается очень востребованной. Собрали полезные материалы, которые помогут вам освоить SPSS и статистические методы для проведения исследований

Математический анализ

Мысль о том, чтобы изучать Data Science, не даёт вам покоя? Возможно, не зря. В этой статье мы ответили на ряд популярных вопросов новичков.

В последнее время Data Science набирает популярность в IT-мире, и игнорировать эту технологию просто не получается. Так каково это ? изучать Data Science в 2019 году?

Как начать изучение Data Science? Что и где читать? Какие есть подводные камни, советы и уловки? Статья в помощь для Junior Data Scientist.

Область Data Science очень обширна, ее довольно сложно изучить всю сразу. Нужно определиться с направлением, выбрать его и «штудировать».

Собрали для вас самые интересные статьи по Data Science с нашего сайта https://proglib.io/

Общее

Актуальная математика: самый понятный курс по анализу данных

7 книг для начинающего специалиста по анализу данных

Автор: Лекс Кравецкий

Если вы где-то читаете фразу вида «оказалось, что у данных событий корреляция вот такая вот», то примерно в 99,99% случаев, если прямо не оговорено иного, речь идёт о коэффициенте корреляции Пирсона. «Дефолт-корреляция» — это он.

Подборка примечательных файлов формата Jupyter Notebook по Machine Learning, Data Science и другим сферам, связанным с анализом данных.

1. На первом уроке курса "Инструментарий" мы поговорим об интерпретаторах Python и IPython, тетрадках IPython как средства воспроизводимых исследований, среде разработки PyCharm, системе контроля версий Git и сборке библиотек Anaconda.

1. Описательные статистики. Квантили, квартили. Гистограммы. Ядерные оценки плотности.

2. Описательные статистики. Ящики с усами. Выбросы. Медиана и среднее арифметическое как типичные наблюдения.

3. Иерархический кластерный анализ. Кластер, расстояния между объектами, расстояния между кластерами.

Давно думали разобраться в науке о данных, но не знали, с чего начать? Мы собрали материалы, которые помогут стать специалистом по Data Science.

Прежде чем перейти к обсуждению необходимых знаний, объясним, зачем вообще становиться специалистом по Data Science.