Тимур Кадыров,Лаборатория Нейронаук. Ускоряем расчет признаков на коротком датасете для HFT на бирже
Для работы HFT необходимы очень маленькие задержки. Поэтому при внедрении ML модели нужно учитывать ограничения на время расчёта признаков. Есть много докладов и статей на тему ускорения расчётов на pandas. Сюда можно отнести и pandarallel, и dask, и polars. Ребята из Intel даже рассказывали на прошлом PyCon-е про modin. Все эти инструменты работают при больших объемах данных. Но что делать, если количество строк меньше 1000 или даже 100? В данном докладе хочу осветить несколько тем:
Почему так важна низкая задержка при hft
Какие возможны оптимизации для снижения количества расчетов
Numpy Structured arrays как замена Pandas DataFrame
Вспоминаем математику и ещё немного сокращаем количество операций.
Видео Тимур Кадыров,Лаборатория Нейронаук. Ускоряем расчет признаков на коротком датасете для HFT на бирже канала Видео с мероприятий IT-People
Почему так важна низкая задержка при hft
Какие возможны оптимизации для снижения количества расчетов
Numpy Structured arrays как замена Pandas DataFrame
Вспоминаем математику и ещё немного сокращаем количество операций.
Видео Тимур Кадыров,Лаборатория Нейронаук. Ускоряем расчет признаков на коротком датасете для HFT на бирже канала Видео с мероприятий IT-People
Показать
Комментарии отсутствуют
Информация о видео
15 апреля 2022 г. 12:33:44
00:31:52
Другие видео канала
![Отзывы спикеров о конференции DUMP Ekb 2023](https://i.ytimg.com/vi/Ewvac71eYeg/default.jpg)
![DUMP EKB 2023](https://i.ytimg.com/vi/wzTIhgPwJsw/default.jpg)
![IT-Регата 2022 в Черногории. Открытие](https://i.ytimg.com/vi/eg0IQuzjTXo/default.jpg)
![Василий Копытов, Авито. Как и почему мы перешли от Python к Go в нашем основном сервисе рекомендаций](https://i.ytimg.com/vi/uA3VVce6KCw/default.jpg)
![Данил Ахтаров, Тинькофф. Почему питон не будет функциональным и почему нафиг никому это не нужно](https://i.ytimg.com/vi/MGXBzjp-mTk/default.jpg)
![Олег Хачумов, CVisionLab. 4 мушкетера: python, cython, numba и taichi. Ускоряем код, не ломая голову](https://i.ytimg.com/vi/S8f3UifWUlg/default.jpg)
![Павел Мальцев, Speechki. Redis, сова и глобус](https://i.ytimg.com/vi/I3Ej8Npy2Lw/default.jpg)
![Станислав Фатеев, CVisionLab. Pydantic: валидируй это. Как работать с данными быстро и без боли](https://i.ytimg.com/vi/CWzQv7hG5_c/default.jpg)
![Матвей Коняев, Точка. Как писать тесты дешевле](https://i.ytimg.com/vi/MJPZ-XrWLsw/default.jpg)
![Сергей Бершадский, Urbamatica. Что сделать, чтобы DevOps вас (Девелоперов) любил](https://i.ytimg.com/vi/1bvm-mJD9VI/default.jpg)
![Денис Толкачев, Сбер,Лаборатория Нейронаук. Производственный брак. Ищем некрасивую рыбу на конвейере](https://i.ytimg.com/vi/cbG_9y1-2nk/default.jpg)
![Как подойти к тестированию безопасности. Дмитрий Крылатков, Doubletapp](https://i.ytimg.com/vi/C1EwlLDjNeY/default.jpg)
![Релокация разработчиков: неочевидные вещи про поиск работы зарубежом](https://i.ytimg.com/vi/_8HjP4Tw65E/default.jpg)
![Meetup «Стокгольмский синдром или жизнь тимлида»](https://i.ytimg.com/vi/MhZafRm4zMY/default.jpg)
![Трансатлантический переход: подготовка, яхтенный быт и приключения](https://i.ytimg.com/vi/2Rzzd5VrcEs/default.jpg)
![GameDev_Как игры меняют наше будущее_Cергей Гимельрейх](https://i.ytimg.com/vi/_OieYPpogYw/default.jpg)
![Mobile_Разработка на моках_Александр Кравченков_Surf](https://i.ytimg.com/vi/-qjclM7Vmtc/default.jpg)
![Mobile_Жизнь вслепую: разрабатываем устройство без экрана_Виктор Лапин_Адвантум](https://i.ytimg.com/vi/z4zmcxWmVgw/default.jpg)
![Mobile_The Swarm_Денис Малых_Яндекс](https://i.ytimg.com/vi/p_3UXDD0n9E/default.jpg)
![Mobile_Писать или не писать Вот в чем вопрос тесты на Flutter_Евгений Сатуров_Surf](https://i.ytimg.com/vi/2JfFlwyM7J0/default.jpg)