IT и бизнес

Парсинг финансовой информации с Yahoo Finance

Для анализа финансовых данных необходимо их получить. Near realtime данные проще забирать с Yahoo Finance, нежели с Bloomberg. Видимо из-за новостной ориентации Bloomberg защита от web scraping значительно серьезнее. Если неосторожно забирать данные, то легко получить страницу с запросом captcha. … Читать далее

Posted in IT рецепты | Tagged , , , , , , | Leave a comment

Разметка текста для обучения нейронной сети

Для тренировки нейронной сети нужен размеченный текст. Нередко разметку текста производят фрилансеры. Файл для разметки может быть подготовлен разными способами. Один из таких вариантов — разметка непосредственно в Word. Например, есть отзывы о продукте, которые нужно разметить силами фрилансеров. Отзывы … Читать далее

Posted in IT рецепты | Tagged , , , | Leave a comment

Анализ текстов нейронными сетями. Bag Of Words vs. Embedding.

Анализ текстовой информации — весьма полезный инструмент. Я ранее публиковал уже статьи на тему анализа текстов. Например, анализ авторства текста, генеративные сети с условием (в этих GAN-ах использовался слой embedding), чатботы и пр. Пора систематизировать способы представления текстов в числовой … Читать далее

Posted in IT рецепты | Tagged , , , | Leave a comment

Как работает реккурентная нейронная (RNN) сети при анализе текстов

Эта статья — конспект лекции Константина Слепова, читаемой в «Университете искуственного интеллекта» в курсе «Углубленный курс по текстам (Natural Language Processing)». Предположим есть задача последовательного предсказания букв некоторой последовательности. Например, мы хотим получить модель в которой по трем буквам происходит … Читать далее

Posted in IT рецепты | Tagged , , , | Leave a comment

Прогноз заболеваемости коронавирусом в России

В Интернет хватает графиков показывающих текущую ситуацию с заболеваемостью коронавирусом в России, но почему-то не удалось найти прогноз. Графики отражающие текущую ситуацию: 2GIS Yandex.Map Мне не удалось найти статистику заболеваемости коронавирусом в табличном виде, поэтому данные брал из этих диаграмм. … Читать далее

Posted in IT рецепты | Leave a comment

Tensorflow и Keras. Convolution слои. Часть 2.

В предыдущей статье я очень подробно разобрал построение архитектуры нейронной сети на dense слоях в Keras и Tensorflow. В этой статье рассмотрю сверточные (convolutional) слои. Эта статья, как и предыдущая, использует материалы лекций Сергея Кузина читаемых в «Университете искусственного интеллекта», … Читать далее

Posted in IT рецепты, Нейронные сети | Tagged , , , , , | Leave a comment

Tensorflow и Keras. Dense слои. Часть 1.

Давеча в «Университете искусственного интеллекта» Сергей Кузин прочитал занимателную лекцию по использованию Tensorflow и некоторому сравнению с Keras. Тема достаточно сложная, поэтому разберу её подробно для лучшего понимания, добавляя свои комментарии и ссылки на другие статьи, где разъясняются нюансы. Keras … Читать далее

Posted in IT рецепты | Tagged , , | Leave a comment

Обсуждение закрыто.