You signed in with another tab or window. Reload to refresh your session.You signed out in another tab or window. Reload to refresh your session.You switched accounts on another tab or window. Reload to refresh your session.Dismiss alert
Здравствуйте!
Мы решили скрестить дедок с нашим etl-сервисов по обработке сырых данных. И вот с чем мы столкнулись:
Контейнерный дедок однопоточный. FastApi ендпоинт /upload работает со статическим DedocManager, внутри которого есть общая блокировка-ресурс. При накидывании нескольких запросов с большими файлами, первый файл встанет в обработку, остальные в очередь. И даже есть произойдет http-таймаут на вызываемой стороне, файл продолжит обработку.
Реальный кейс - есть такая книжка Боб Бонд Справочник Яхтсмена.pdf, она с auto-tabby парсится 3 часа...
Можно ли как то управлять отменой парсинга, или взять взаимной блокировкой ресурса?
Версия v2.2.6
The text was updated successfully, but these errors were encountered:
Здравствуйте! К сожалению, эта проблема пока никак не решается, обработку можно остановить только остановкой контейнера... Нам нужно поисследовать решения этой проблемы, поведение и правда неудовлетворительное
Здравствуйте!
Мы решили скрестить дедок с нашим etl-сервисов по обработке сырых данных. И вот с чем мы столкнулись:
Контейнерный дедок однопоточный. FastApi ендпоинт /upload работает со статическим DedocManager, внутри которого есть общая блокировка-ресурс. При накидывании нескольких запросов с большими файлами, первый файл встанет в обработку, остальные в очередь. И даже есть произойдет http-таймаут на вызываемой стороне, файл продолжит обработку.
Реальный кейс - есть такая книжка Боб Бонд Справочник Яхтсмена.pdf, она с auto-tabby парсится 3 часа...
Можно ли как то управлять отменой парсинга, или взять взаимной блокировкой ресурса?
Версия v2.2.6
The text was updated successfully, but these errors were encountered: