Долго работает delete from table на больших таблица и завершается с ошибкой network error #25848
Description
-
Никаких признаков проблем на server side c network error со стороны IC, KQP, CS не вижу:
- Ошибок IC не видно https://nda.ya.ru/t/depRrUDx7KSVF5
- Uptime нод не менялся https://nda.ya.ru/t/gfYHcCJ_7KSVSE
- Возможно порвалось сетевое соединение на ноуте или же какая-то проблем в UI
-
Для того чтобы сделать delete необходимо в начале прочитать все pk таблицы, а затем на шард отправить запрос с delete. В таблице 7 TiB данных. Похоже в этой таблице было большое число дублей:
- Видно упирание в conveyor с дедубликатором: https://nda.ya.ru/t/Eqtcjw7O7KSWce (там всего один поток нужно поправить)
- Слишком много пересечений в 100%: https://nda.ya.ru/t/QZxVFMsK7KSX4Z (вероятно при заливке залили много одинаковых данных на ретраях и оно не успело скомпактиться)