Научный форум dxdy

Математика, Физика, Computer Science, Machine Learning, LaTeX, Механика и Техника, Химия,
Биология и Медицина, Экономика и Финансовая Математика, Гуманитарные науки




На страницу Пред.  1 ... 327, 328, 329, 330, 331  След.
 Re: Пентадекатлон мечты
Аватара пользователя
А почему я про снежный ком заговорил. Потому что наблюдал нарастание ожидающих проверку заданий и их перевыдачу другим кранчерам. В этом случае, когда задание перевыдаётся первый раз, к имени задания в конец добавляется _1.

Я не сразу начал сохранять данные. Но вот здесь видно это нарастание и по верхней и по нижней позиции, по сравнению с тем, что опубликовано в посте выше:

Код:
Tasks ready to send                      989
Задания обрабатываются                  5143
Workunits waiting for validation        1811

Но вот теперь наконец-то преодолели:

Код:
Tasks ready to send                        0
Задания обрабатываются                  3702
Workunits waiting for validation           0

Но заданий на выдачу-то опять нет! Ситуация всё равно повторилась.

Как я это вижу.

Того Админа которого я раньше упоминал и с которым контактирую буду называть Админ1.

Поскольку я и вчера и сегодня почти целую ночь не спал, могу констатировать:

Вчера последняя выдача 10 тысяч заданий (насколько я знаю, больше 10K нельзя) была примерно в 2 часа ночи. После чего Админ1 попросту заснул и без него никто ничего не выдавал. С 6:40 до примерно 10:55 заданий на выдачу было 0. С этого момента Админ1 снова начал их выдавать.

Чтобы этого не повторилось и сегодня, я предложил Админу1 передать заблаговременно сгенерированные задания Админу2 (с которым сам я лично не знаком и не контачу). Надеюсь понятно для чего: чтобы их зарядил Админ2 (или Админ3), чтобы дать Админу1 хотя бы поспать.

Мы же люди, а не роботы. Круглосуточно одному человеку очень трудно выдавать задания каждые 2-4 часа, да и не должен вроде международный круглосуточный проект держаться на одном человеке.

И сегодня опять последняя выдача 10 тысяч заданий была произведена Админом1 в 2 часа ночи. Разница только в этом дополнительном приключении с перевыдачей и в том, что задания закончились не в 6 утра по Москве, а где-то в 7.

Так а почему же лимит такой маленький, спросите вы. Почему нельзя выдать сразу 50 — 100 тысяч заданий? А я знаю? Конечно была просьба увеличить лимит.

Ещё я предложил увеличить размер задания, чтоб каждое в среднем считалось не 16-17 минут как сейчас, а например, 30-31 минуту. Самих заданий при этом конечно станет меньше. И это предложение тоже не было принято.

 Re: Пентадекатлон мечты

(Не стоит засорять тему домыслами)

Yadryara в сообщении #1735278 писал(а):
Как я это вижу.

Того Админа которого я раньше упоминал и с которым контактирую буду называть Админ1.

Поскольку я и вчера и сегодня почти целую ночь не спал, могу констатировать:

Вчера последняя выдача 10 тысяч заданий (насколько я знаю, больше 10K нельзя) была примерно в 2 часа ночи. После чего Админ1 попросту заснул и без него никто ничего не выдавал. С 6:40 до примерно 10:55 заданий на выдачу было 0. С этого момента Админ1 снова начал их выдавать.

Чтобы этого не повторилось и сегодня, я предложил Админу1 передать заблаговременно сгенерированные задания Админу2 (с которым сам я лично не знаком и не контачу). Надеюсь понятно для чего: чтобы их зарядил Админ2 (или Админ3), чтобы дать Админу1 хотя бы поспать.

Мы же люди, а не роботы. Круглосуточно одному человеку очень трудно выдавать задания каждые 2-4 часа, да и не должен вроде международный круглосуточный проект держаться на одном человеке.

И сегодня опять последняя выдача 10 тысяч заданий была произведена Админом1 в 2 часа ночи. Разница только в этом дополнительном приключении с перевыдачей и в том, что задания закончились не в 6 утра по Москве, а где-то в 7.

Так а почему же лимит такой маленький, спросите вы. Почему нельзя выдать сразу 50 — 100 тысяч заданий? А я знаю? Конечно была просьба увеличить лимит.

Ещё я предложил увеличить размер задания, чтоб каждое в среднем считалось не 16-17 минут как сейчас, а например, 30-31 минуту. Самих заданий при этом конечно станет меньше. И это предложение тоже не было принято.
Работа ведется.
Ведется непрерывно.
И уже сейчас есть положительные подвижки.

Под работой имеется ввиду п.4 из поста https://dxdy.ru/post1735240.html#p1735240 последний абзац.
Когда все стабилизируется будет легче.
Когда именно это произойдет?
Не знаю.
Но, напомню нашу с Вами переписку, минимум неделя нужна. Прошу помнить об этом.
И это нормально.

-- добавлено через 8 минут --

EUgeneUS в сообщении #1735255 писал(а):
Сколько у вас в BOINC получается в среднем активных потоков?

Сложно пока понять более точно.
Я прикидываю так:
Сейчас
Код:
Total   271 computers         28.74 TeraFLOPS
Если взять среднее 8 ядер (один расчет=одно ядро=один поток), то 271 * 8 = 2168.
Ну это примерно конечно.

 Re: Пентадекатлон мечты
На 271 компьютер приходится 4002 потока, так что в среднем по 15 потоков на комп.
В среднем по 7ГФлопс на поток.
Сколько из них активных я без понятия.

Хотя эти цифры про потоки весьма приближённые, в таблице встречаются глупые ошибки (1 поток вместо 44 или 24 вместо 12 или для одинаковых процов указано 3 и 8 потоков).

 Re: Пентадекатлон мечты
Аватара пользователя
Хорошие мощности.
С такими мощностями можно хорошо улучшить цепочки, которые без ускорителей считались.
А если ускорители "прикрутить", то и на $D(36,15)$ можно замахнуться :wink:
Не знаю, как долго будет считаться $D(36,15)$, но $D(36,14)$ должно найтись довольно быстро.

 Re: Пентадекатлон мечты
Аватара пользователя
Ещё я смотрю на результаты. Научился смотреть стату по батчам.

100800 заданий охватывают весь первый сорт для 58-го ранга (то бишь от 0 до 1e58).

На предтестах я обсчитал 7560 заданий 58-го ранга. Затем, за эти двое суток (несмотря даже не задержки) в проекте полностью обсчитали все остальные задания вплоть до 100080-го включительно.

И кусочек в 720 заданий попал в следующий батч и он сейчас досчитывается.

Так что когда 16-й батч досчитается, а это будет уже в ближайшие часы, можно будет уже дособрать статистику по первому сорту 1-2-19-2-10! и отдельно считать стату по второму сорту. Посмотрим сильно ли он хуже.

90 — 100 тысяч заданий за двое суток это весьма круто, да. Выше не только моих, но и наших ожиданий. Но, как это обычно бывает, интерес и активность со временем обычно слабеют, так что от прогнозов пока воздержусь.

 Re: Пентадекатлон мечты
Аватара пользователя
Да ёлки ж зелёные. За 7 часов 20 тысяч новых заданий переварили и заданий на выдачу опять 0.

Yadryara в сообщении #1735292 писал(а):
Так что когда 16-й батч досчитается, а это будет уже в ближайшие часы,

Посчитан на 97.8 %.

Yadryara в сообщении #1735292 писал(а):
отдельно считать стату по второму сорту.

Вспомнил: там пожестче отбор. Как и для 1-го сорта жёстко требую 48 делителей для всех мест с p, pq и pqrs. Только для 2-го сорта таких мест 6, а не 5. Зато чуть-чуть побыстрее считаться будет.

 Re: Пентадекатлон мечты
Ну так на 4000 потоков при среднем времени 0.27ч на задание надо 15000 заданий в час.
Так что компы в основном похоже простаивают (или считают что-то другое) из-за недостатка заданий.
А избыток неотправленных заданий наблюдается из-за редкости обращения компов за заданиями.

 Re: Пентадекатлон мечты
Аватара пользователя
Вот именно, они далеко не в полную силу пашут. И это позволяет Демису (который тоже не в полную силу) держаться на весьма высоком 13-м месте.

Решил всё-таки, как рекомендовали, опубликовать пост в "Науке", на форуме Централа.

Но, оказывается, нужно иметь кредит. А где его взять если у меня Докер не работает. Я уже пытался его подключить, ещё 3-го сентября, когда БОИНК Менеджер устанавливал. Почитаю, попробую ещё раз подключить. Хотя, может лучше знающего человека дождаться.

 Re: Пентадекатлон мечты
Аватара пользователя
Yadryara в сообщении #1735296 писал(а):
А где его взять если у меня Докер не работает. Я уже пытался его подключить, ещё 3-го сентября, когда БОИНК Менеджер устанавливал.

Хотя нет, вроде это был Дистро, а не Докер. Такому чайнику как я немудрено было перепутать.

Вот зашёл сюда, но не понимаю чего дальше делать.

https://github.com/BOINC/boinc-buda-runner-wsl-installer

Ещё одна с valids = 23 нашлась, но это не дрофа, а ласточка. Кто нашёл, пока не знаю.

Код:
2481263048574449683114523250526626409149595249107133232597    111 111 11111111111111111    23

 Re: Пентадекатлон мечты
Аватара пользователя
Сегодня всю ночь бодрствовать не смог и точно не знаю во сколько в этот, уже 4-й раз, закончились задания. Я заметил в 4:30 по Москве.

Конечно, я прекрасно знаю какие именно задания надо загружать дальше. Только сделать я это не могу. Но я могу озвучить прямо здесь, в надежде на то, что те кто могут, прочитают и загрузят-таки.

19-й батч закончился на 58000140080. Загрузите, пожалуйста,

20-й батч: 58000140081 — 58000150080

потом

21-й батч: 58000150081 — 58000160080

И так далее, номера заданий для следующих 11 батчей, вплоть до 30-го включительно можно и нужно брать подряд.

-- добавлено через 54 минуты --

Хорошие новости: оказывается ЛС можно написать, даже без кредита. Я написал на Централе.

 Re: Пентадекатлон мечты
Аватара пользователя
Ура! Лимит увеличен и увеличен существенно:

Код:
Tasks ready to send      25910
Задания обрабатываются    4105

 Re: Пентадекатлон мечты
Dmitriy40 в сообщении #1735287 писал(а):
Хотя эти цифры про потоки весьма приближённые, в таблице встречаются глупые ошибки (1 поток вместо 44 или 24 вместо 12 или для одинаковых процов указано 3 и 8 потоков).
Тут немного по другому.
Есть компы, которые, например, имеют установленную виртуалку.
А для виртуалки пользователь может задать и 1 из 44.
А есть и такие, которые задают 128, для процессора модель которого максимум 8(16) по техническим показателям.
(И их кстати обычно видно в статистике заданий).
Сайт именно это и показывает.

Dmitriy40 в сообщении #1735295 писал(а):
Ну так на 4000 потоков при среднем времени 0.27ч на задание надо 15000 заданий в час.
Разброс времени на этом расчете от 5 мин до 3 часов.
(но 3-ех часовых не много. полную диагностику обрабатывал, но чисто в ознакомительных целях и на первом запуске.)

 Re: Пентадекатлон мечты
Аватара пользователя
\begin{tikzpicture}[scale=1.0]
\node[anchor=west] at (0, 1.5) {\large\textbf{Egon Olsen}};
\node[blue] (num1) at (3.5, 1.5) {$23$};
\draw[blue, thick] (num1) circle (0.28);
\node[anchor=west] at (0, 0.8) {\large\textbf{RinYuhki}};
\node[blue] (num2) at (2.9, 0.8) {$23$};
\draw[blue, thick] (num2) circle (0.28);
\node[anchor=west] at (0, 0.1) {\large\textbf{thec0mpler}};
\node[blue] (num3) at (3.5, 0.1) {$23$};
\draw[blue, thick] (num3) circle (0.28);
\end{tikzpicture}

Это я такие значки предлагаю везунчикам. Стата по 1-му сорту готова. Кэф 13.0 это конечно не 16, но всё равно выглядит завышенным.

Код:
Валидс                 1-й сорт
по полю            от 0 до 1е58

     23                2
     22               26   13.0
     21              125    4.8
     20              388    3.1
________________________
                     541

Среди первосортных найдена 1 дрофа и 12 ласточек.

 Re: Пентадекатлон мечты
Аватара пользователя
Однако же, в одном только 20-м батче нашлись сразу три дрофы. И самый топ приближений теперь выглядит так:

Код:
1310566755964919096251523210115306162474221091020502735379   111111111 11111111111111 1    24

1691566735274966463469358117734664483671333592670090898579   111111111 11111111111111      23
2481263048574449683114523250526626409149595249107133232597    111 111 11111111111111111    23
5462688005710470548576832758940138735829486095383466860179   1111 1111111111111111111      23
7646332835629288721646241936613543659943203661988194684179   111111111 111 1111111111 1    23
7700397729596448102975045572135401605758085721958698683797      11111111111111111111111    23

А Гигафлопсы доросли до Терафлопса:

Current GigaFLOPS 1127.39

 Re: Пентадекатлон мечты
Аватара пользователя
Не понимаю что происходит, но заданий на выдачу уже несколько часов опять нет.

Решил попробовать установить не Докер, а Подман через Убунту. Здесь рассказывать об этом, пожалуй не буду.

 [ Сообщений: 4952 ]  На страницу Пред.  1 ... 327, 328, 329, 330, 331  След.


Соглашение о конфиденциальности | Общие правила

Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group