Длительное время вычисления

Message boards : Number crunching : Длительное время вычисления
Message board moderation

To post messages, you must log in.

AuthorMessage
Leonmer

Send message
Joined: 6 Mar 19
Posts: 3
Credit: 6,407,100
RAC: 37,978
Message 1978 - Posted: 4 May 2025, 9:27:37 UTC

Здравствуйте!
Так себе задумка выставлять задания на 3,5 дня счёта.
Задумайтесь, считает, считает и компьютер перезагружается ... Незаконченное задание не сохраняется.
Короче, дичь. Мудрите, мудрите и отобъёте желание. То сроки крайне малые, то длительность расчётов к космос
ID: 1978 · Rating: 0 · rate: Rate + / Rate - Report as offensive     Reply Quote
hoarfrost
Volunteer moderator
Project administrator
Project developer
Project tester
Volunteer developer
Volunteer tester
Project scientist
Help desk expert

Send message
Joined: 11 Aug 17
Posts: 669
Credit: 24,912,994
RAC: 16,133
Message 1980 - Posted: 4 May 2025, 13:24:12 UTC - in response to Message 1978.  

Если компьютер надо время от времени перезагружать, то на время обработки этого пакета задач, проще отключить использование приложения "Spectra of Latin squares". На сервере есть и много других. :)
В этом пакете они действительно получились очень большие, дальнейшие эксперименты в этой области будут связаны с другим подходом.
ID: 1980 · Rating: 0 · rate: Rate + / Rate - Report as offensive     Reply Quote
Leonmer

Send message
Joined: 6 Mar 19
Posts: 3
Credit: 6,407,100
RAC: 37,978
Message 1981 - Posted: 4 May 2025, 13:48:08 UTC - in response to Message 1980.  

Отключить то через три дня? Какие то решения уровня "Сам виноват".
Почему нельзя пояснить какая цель таких длительных обработок заданий, что такого великого в таком подходе.
Или просто признать ошибочный подход
ID: 1981 · Rating: 0 · rate: Rate + / Rate - Report as offensive     Reply Quote
hoarfrost
Volunteer moderator
Project administrator
Project developer
Project tester
Volunteer developer
Volunteer tester
Project scientist
Help desk expert

Send message
Joined: 11 Aug 17
Posts: 669
Credit: 24,912,994
RAC: 16,133
Message 1982 - Posted: 4 May 2025, 22:20:21 UTC - in response to Message 1981.  
Last modified: 5 May 2025, 6:42:22 UTC

Пояснить длительность - вполне можно. :) Данный эксперимент является последним в целой цепочке, в которой использовались приложения с очень похожим (или даже одинаковым) алгоритмом. Длительность заданий - росла и для этих заданий она достигла наблюдаемых величин. Если конкретно в этом поиске будут ещё какие-то вычислительные эксперименты то для них будет использоваться уже другой алгоритм. Сильно другой.

Соответственно, обработку вот этой партии из ~23664 заданий можно было выполнять двумя способами:
- Уже существующим приложением, "здесь и сейчас";
- Специально для этой партии переделывать приложение (и когда на это хватит времени - неясно), причём в дальнейшем оно, возможно, вообще никогда бы не пригодилось.

Да, задания длинные. Но 865 из них - уже посчитались, осталось ещё 22799. :)
ID: 1982 · Rating: 0 · rate: Rate + / Rate - Report as offensive     Reply Quote
Leonmer

Send message
Joined: 6 Mar 19
Posts: 3
Credit: 6,407,100
RAC: 37,978
Message 1984 - Posted: 5 May 2025, 2:14:31 UTC

Спасибо за ответ)))
такими темпами осталось всего то месяцев семь
ID: 1984 · Rating: 0 · rate: Rate + / Rate - Report as offensive     Reply Quote
mutabor2

Send message
Joined: 4 Apr 25
Posts: 3
Credit: 12,789
RAC: 421
Message 1989 - Posted: 8 May 2025, 3:21:58 UTC

Из 4-ёх задач пытаюсь закончить три, каждый день считаю по несколько часов. Сначала выключал, потом заметил, что время счёта каждый раз обнулялось, пришлось переводить в спящий режим. Последние несколько дней - никаких результатов, время вычислений увеличивается, но проценты и время до конца не улучшаются. Задачи застыли на 84%, 78%, 69% (последние 13 часов вычислений), иногда проценты со временем наоборот немного уменьшаются, а время до конца увеличивается. Похоже на баг и придется после нескольких дней вычислений оставить попытки досчитать.
ID: 1989 · Rating: 0 · rate: Rate + / Rate - Report as offensive     Reply Quote
hoarfrost
Volunteer moderator
Project administrator
Project developer
Project tester
Volunteer developer
Volunteer tester
Project scientist
Help desk expert

Send message
Joined: 11 Aug 17
Posts: 669
Credit: 24,912,994
RAC: 16,133
Message 1990 - Posted: 8 May 2025, 16:41:46 UTC - in response to Message 1989.  

Из 4-ёх задач пытаюсь закончить три, каждый день считаю по несколько часов. Сначала выключал, потом заметил, что время счёта каждый раз обнулялось, пришлось переводить в спящий режим. Последние несколько дней - никаких результатов, время вычислений увеличивается, но проценты и время до конца не улучшаются. Задачи застыли на 84%, 78%, 69% (последние 13 часов вычислений), иногда проценты со временем наоборот немного уменьшаются, а время до конца увеличивается. Похоже на баг и придется после нескольких дней вычислений оставить попытки досчитать.

В силу ограничений связанных с самим поиском, процент выполнения изменяется нелинейно. Чем ближе к 100%, тем медленнее он нарастает. Но, всё же, не асимптотически. >:D.
На Ryzen 3900X на одно задание уходит от 3 до 5 суток.
Если для вашей машины это проблема (например, если её надо выключать), то можете просто отключить получение заданий к этому приложению. Другие - тоже важные. :)
ID: 1990 · Rating: 0 · rate: Rate + / Rate - Report as offensive     Reply Quote
mutabor2

Send message
Joined: 4 Apr 25
Posts: 3
Credit: 12,789
RAC: 421
Message 1991 - Posted: 11 May 2025, 3:46:08 UTC - in response to Message 1990.  

Красивые слова, особенно когда модель неизвестна. Заинтересовался и хотел посчитать хоть одну задачу. С 84% и 4 часов остаточных вычислений за 25 часов дошёл до 97% и одного часа в остатке. Почуствовал стариком в сказке Пушкина и посмотрел со стороны.
Задача не требует постоянного интернета, при отсоединении интернета в приложении все задачи продолжают счёт. Но другие задачи стремятся к завершению, а эта при отключении интернета МОНОТОННА и уже вернулась к 93% и почти трём часам остатка.

П.С. Был случай из жизни, когда один увидел возможность халявно криптой разжиться запустив на большой ферме пару своих небольших задач. Погорел на том, что у задач были нестандартные свойства, которые заставили покопаться по-глубже. Ни на что не намекаю, но надеюсь, что всё же здесь баг, а не умысел. В любом случае, надеюсь, что информация поможет (я у себя эти задачи удалил).
ID: 1991 · Rating: 0 · rate: Rate + / Rate - Report as offensive     Reply Quote
hoarfrost
Volunteer moderator
Project administrator
Project developer
Project tester
Volunteer developer
Volunteer tester
Project scientist
Help desk expert

Send message
Joined: 11 Aug 17
Posts: 669
Credit: 24,912,994
RAC: 16,133
Message 1992 - Posted: 11 May 2025, 7:25:05 UTC - in response to Message 1991.  
Last modified: 11 May 2025, 7:25:32 UTC

... а эта при отключении интернета МОНОТОННА и уже вернулась к 93% и почти трём часам остатка. ...

Наличие или отсутствие интернета при выполнении вычислений ни на что не влияет. Просто самая долгая часть - где-то после 80%.
Например, прямо сейчас, у меня на компьютере:
Процент | Время
_______ | ____
87%     | 33 часа.
....
97%     | 93 часа
...
93%     | 97 часов
....

И если пробовать наблюдать за процентом выполнения за последней стадии, но недолго время, то, его изменение, конечно, будет казаться линейным.
ID: 1992 · Rating: 0 · rate: Rate + / Rate - Report as offensive     Reply Quote
mutabor2

Send message
Joined: 4 Apr 25
Posts: 3
Credit: 12,789
RAC: 421
Message 1993 - Posted: 11 May 2025, 18:02:13 UTC - in response to Message 1992.  

Спасибо за подтверждение, что интернет на вычисления не влияет. Каждый сам может отключить интернет и проверить. Успехов!
ID: 1993 · Rating: 0 · rate: Rate + / Rate - Report as offensive     Reply Quote

Message boards : Number crunching : Длительное время вычисления

©2025 The searchers team, Karelian Research Center of the Russian Academy of Sciences