| 1.1, Аноним (1), 09:49, 20/11/2024 [ответить] [﹢﹢﹢] [ · · · ]
| +1 +/– |
Питон раза в 2 ускоряется в пго билде с парой дополнительных флагов.
| | |
| |
| 2.4, Аноним (4), 10:03, 20/11/2024 [^] [^^] [^^^] [ответить]
| +29 +/– |
Самый лучший способ ускорить питоновские приложения -- это переписать их на другой язык.
| | |
| |
| 3.5, Аноним (1), 10:06, 20/11/2024 [^] [^^] [^^^] [ответить]
| +2 +/– |
Это надо переписывать. Поверь, бесплатное ускорение это очень выгодно. А если пользователь ждёт завершения, ещё и приятно.
| | |
| |
| |
| 5.44, Аноним (1), 13:58, 20/11/2024 [^] [^^] [^^^] [ответить]
| +4 +/– | |
> только оно не бесплатное
Ничего не надо делать, пару команд в сборочный скрипт добавить. Прочее ускорение потребует рефакторинга кода, изменения структур данных, замены компонентов и так далее. Добавить пару команд и задействовать компилятор более полноценно, это, фактически, бесплатно. И максимально универсально.
| | |
| |
| 6.70, Аноним (-), 13:19, 21/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
>> только оно не бесплатное
> Ничего не надо делать, пару команд в сборочный скрипт добавить. Прочее ускорение
> потребует рефакторинга кода, изменения структур данных, замены компонентов и так далее.
> Добавить пару команд и задействовать компилятор более полноценно, это, фактически, бесплатно.
> И максимально универсально.
PGO нифига не бесплатно: чтобы это реально работало надо профиль отстроить. И это ессно жрет ресурсы.
| | |
|
|
| 4.59, Аноним (59), 23:30, 20/11/2024 [^] [^^] [^^^] [ответить]
| –3 +/– |
Переписывать дорого. А надеяться на всякие хаки которые позволяют выжать из питона ещё десяток процентов, при том что он отстаёт от компилируемых языков в десятки раз и не умеет в многопоточность - глупо. Единственная правильная стратегия - на питоне ничего не писать с самого начала.
| | |
| 4.66, Аноним (66), 12:01, 21/11/2024 [^] [^^] [^^^] [ответить]
| +/– | |
>Это надо переписывать.
На питоне изначально не надо писать, тогда и переписывать не придётся
| | |
| |
| 5.69, Аноним (1), 12:35, 21/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
Быстро, удобно, есть готовые компоненты приемлемого уровня для решения большинства задач. Единственно, не очень приятно асинхронный код отлаживать (интерпретатор любит врать и подсовывать совершенно несвязанные исключения в посторонних местах). Это прямо боль до сих пор.
| | |
|
|
| 3.9, Аноним (9), 10:17, 20/11/2024 [^] [^^] [^^^] [ответить]
| +2 +/– |
Время первого запуска возрастает до бесконечности. Не самый лучший способ.
| | |
| |
| 4.19, Аноним (19), 10:42, 20/11/2024 [^] [^^] [^^^] [ответить]
| –4 +/– |
Ассемблер может что ускорить только путем срезания острых углов дополнительных проверок. По факту путем снижения безопасТности.
| | |
| |
| 5.32, Аноним (32), 11:34, 20/11/2024 [^] [^^] [^^^] [ответить]
| –2 +/– |
> Ассемблер может что ускорить только путем срезания острых углов
> дополнительных проверок. По факту путем снижения безопасТности.
Как показала соседняя новость с питонокодом в needrestart'е убунт - там тоже с безопасностью не очень оказалось. Оказывается ненужные проверки можно срезать и на питоне. Ну и что что всякая лабуда атакующего под рутом в результате выполняется?! Зато прогер времени себе сэкономил на кодинге проверок!
| | |
| 5.56, Аноним (-), 22:20, 20/11/2024 [^] [^^] [^^^] [ответить]
| –1 +/– |
Не только, он ещё может и манипулировать памятью так как ни в одном языке вы это не сделаете. Только человек не компилятор. Если человек где-то маленький участок кода и может оптимизировать, а вот огромный кусок кода переработать человеку уже не так просто. Именно поэтому и нужны языки программирования.
| | |
|
|
| 3.31, Аноним (-), 11:33, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– | |
> Самый лучший способ ускорить питоновские приложения -- это переписать их на другой язык.
Редхат что-то такое и начал наконец для своего пакетника. Правда, на цать лет позже всех остальных. Энтерпрайзный софт как он есть - кормить клиентуру заплатившую миллионы максимально глюкавым, тормозным и непотребным гуано, "с лопаты". Энтерпрайз в интерьере.
В то время как даже комьюнити смогло написать apt на плюсах нормальных, так что работает в разы шустрее и RAM жрет в разы меньше.
| | |
| 3.41, Соль земли (?), 12:58, 20/11/2024 [^] [^^] [^^^] [ответить]
| +1 +/– |
Лучший способ написать хорошее приложение - это сначала написать плохое. Прогресс невозможен без ошибок.
| | |
| |
| 4.58, YetAnotherOnanym (ok), 23:19, 20/11/2024 [^] [^^] [^^^] [ответить]
| –1 +/– |
 Нет. Написав плохое приложение, вы не напишете хорошее, если не будете к этому страмиться. Поэтому лучший способ написать хорошее приложение - стремиться написать хорошее приложение.
| | |
|
|
| 2.8, Аноним (-), 10:16, 20/11/2024 [^] [^^] [^^^] [ответить]
| +5 +/– | |
> Питон раза в 2 ускоряется в пго билде с парой дополнительных флагов.
Это вы по тем графикам вывод сделали? Обожаю графики где ось начинается не с ноля, сразу иследователи такие важные и нужные. А реально эти 5% разглядеть на фоне нормального графика...
| | |
| |
| 3.17, Аноним (1), 10:39, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
Нет конечно, эти лалки открыли для себя пго 10 лет спустя после всех остальных. Именно поэтому какой-то смысл нести деньги есть только тем, у кого имеются разрабы. Ну, хотя бы, и шляпе. А эти имитируют бурную деятельность на самом деле.
| | |
| |
| 4.28, Аноним (-), 11:24, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
> Нет конечно, эти лалки открыли для себя пго 10 лет спустя после всех остальных.
> Именно поэтому какой-то смысл нести деньги есть только тем, у кого имеются разрабы.
> Ну, хотя бы, и шляпе. А эти имитируют бурную деятельность на самом деле.
Шляпа как видим тоже - та еще шляпа. Ибо теперь это IBM и ваш чемодан денег им уже не очень интересен, сдалась им мелочевка всякая. Вот если вы товарный состав подгоните - так и быть, вы их клиент.
А без этого можете бесплатно покамикадзить тестовым манекеном в федоре. Ух какая благодать! А, вот, еще центос стрем - для манекенов переживших первый раунд краштестов.
| | |
|
|
| 2.21, Archer73 (ok), 10:57, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
 Скачал Python 3.10, и он ПО УМОЛЧАНИЮ собирался с PGO (Скомпилился, долго выполнял тестовые расчеты, перекомпилился используя результаты профилирования)
| | |
| |
| 3.22, Аноним (1), 11:05, 20/11/2024 [^] [^^] [^^^] [ответить]
| –2 +/– |
Да, но периодически проблемы с компиляторами всплывают до сих пор. Корпы хотят, чтобы собиралось шлангом, и ломают сборку гцц. А бинарные билды часто не оптимизированы, в той же федоре стали нормально собирать только несколько лет назад.
| | |
| |
| 4.26, Аноним (19), 11:17, 20/11/2024 [^] [^^] [^^^] [ответить]
| +1 +/– |
Так Федора сама по себе тестовая сборка, зачем там была нужна оптимальность непонятно.
| | |
| |
| 5.27, Аноним (1), 11:23, 20/11/2024 [^] [^^] [^^^] [ответить]
| –1 +/– |
У них почти все скрипты на питоне были. Включая пакетный менеджер. Пго это бесплатное ускорение по сути, никаких недостатков (ну, кроме времени компиляции и необходимости гонять профилирование).
| | |
| |
| 6.29, Аноним (-), 11:28, 20/11/2024 [^] [^^] [^^^] [ответить]
| –4 +/– |
> У них почти все скрипты на питоне были. Включая пакетный менеджер. Пго это
> бесплатное ускорение по сути, никаких недостатков (ну, кроме времени
> компиляции и необходимости гонять профилирование).
Я наелся такого ускорения от редхата и свалил на дебианы и убунты. Потому что делать микро-VM по приципу 1 VM на сервис когда пакетник жрет больше RAM чем сервис - ну вот ой, нерационально.
Как мне кажется, за цать лет транснациональная корпа могла бы разок сделать пакетник нормально а не маяться такой отборной дурью вместо этого.
| | |
| |
| 7.48, _ (??), 19:02, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
Как только ты свалил, они с yum перешли на dnf.
Наверное надо сказать тебе "спасибо!" или поругать что так долго не уходил :)
| | |
| |
| 8.51, Аноним (51), 21:37, 20/11/2024 [^] [^^] [^^^] [ответить] | +/– | А до этого они перешли на yum c up2date Хрен редьки не слаще Что так дрянь что... текст свёрнут, показать | | |
|
|
|
|
|
| 3.24, Аноним (24), 11:09, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
Задача не ускорить сам Python, а ускорить сборочное окружение, собирающее Python и другие пакеты.
| | |
|
| |
| 3.39, Аноним (1), 12:26, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
Да, -fno-plt и -fdevirtualize-at-ltrans ещё. Раньше, помню, -fwhole-program давала хорошую оптимизацию, но там не универсально и только сишные проги собирались в итоге. А так я -fipa-pta тоже использовал универсально, но лто становится несколько неподъёмным для больших прог, решил отказаться.
| | |
|
|
| 1.2, Аноним (2), 09:57, 20/11/2024 [ответить] [﹢﹢﹢] [ · · · ]
| +/– |
Ещё интресно, какой эффект от включения оптимизаций под конретный процессор.
| | |
| 1.7, Аноним (7), 10:11, 20/11/2024 [ответить] [﹢﹢﹢] [ · · · ]
| –1 +/– |
Ничего эффективнее распределенной компиляции еще не придумали. В условиях технологической отсталости - это единственный способ повышения скорости сборки пакетов. ICECC - рулит.
| | |
| 1.12, Аноним (12), 10:24, 20/11/2024 [ответить] [﹢﹢﹢] [ · · · ]
| +5 +/– |
Бить надо за такие графики с отсеченным нулем. Желательно не только по лицу. Там разница всего на 5-6%, но график сделан так чтобы потрясти воображение разницей на глаз этак на 50%. И только внимательный рассмотрит оси, начнет чего-то подозревать и потом наткнется на эти самые скромные 5% под рисунком. Для понимания достаточно было бы одной простенькой таблички вместо всех этих 4-х графиков.
| | |
| |
| 2.16, Аноним (16), 10:37, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– | |
Какая разница, они же не продают эти PGO-оптимизации.
Во-вторых какой тогда смысл в графике, если разницу между столбцами надо через лупу наблюдать?
| | |
|
| 1.13, Аноним (19), 10:27, 20/11/2024 [ответить] [﹢﹢﹢] [ · · · ]
| +2 +/– | |
> Сборочные работы, ранее выполняемые за сутки, при задействовании PGO-оптимизации стали выполняться на два часа быстрее
Я конечно понимаю что большинство местной аудитории гуманитарии и в расчеты не обучены и округляют в зависимости от фазы Меркурия. Но как 5% ускорение дало 2 часа быстрее когда при самых грубых расчетах это 1 час. А при чуть более точных 1 час 12 минут? Да даже округление округления до 6% ну никак не даёт морального права округлять до 2 часов.
| | |
| |
| |
| 3.25, Аноним (19), 11:15, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
Подгонять под результат меня и в школе и институте учили, но на графиках явно пишут что там 5% 2 часа это либо менеджера обмануть или менеджер кого-то пытается обмануть или препода обмануть, но зачем?
| | |
| |
| 4.37, пох. (?), 12:02, 20/11/2024 [^] [^^] [^^^] [ответить]
| +1 +/– |
> Подгонять под результат меня и в школе и институте учили, но на
> графиках явно пишут что там 5% 2 часа это либо менеджера
> обмануть или менеджер кого-то пытается обмануть или препода обмануть, но зачем?
performance review сам себя не пройдет.
| | |
|
|
|
| |
| 2.35, пох. (?), 11:50, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– | |
я что-то вообще не понял кто у них на ком стоял. Они _виртуалку_ пересобрали с pgo чтобы внутри пересобирать что-то с чем-то ? Или qemu? Или вот что? Чтобы - что?
В общем, какой-то васян похоже просто развлекался от нечего делать, но выдал на гора целое "исследование" ни о чем.
| | |
| |
| 3.45, гулигули (?), 15:56, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
Да, пересобрали виртуалку, в которой собирают пакеты под risc-v (для дистриба на risc-v).
Оказалось чуть быстрее.
| | |
|
|
| |
| |
| 3.53, Аноним (-), 21:45, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– | |
> Поставь Gentoo по классике, поймёшь.
Ога, когда система портажей на этом самом питоне с очередным питоном вдруг не станет работать - ты познаешь тао во всей его красоте. Или это дао было? :)
| | |
|
| |
| 3.57, Аноним (-), 22:28, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
А вы реально смотрите весь код каждого пакета перед компиляцией? Может проблема в том что нет доверенного источника такого пакета? Вот каждый что-ли должен перепроверять один и тот же код? И это при том что у каждого разный опыт и знания касательно безопасности.
| | |
|
|
| 1.40, InuYasha (??), 12:37, 20/11/2024 [ответить] [﹢﹢﹢] [ · · · ]
| +/– |
Ну.... играл я с этим когда-то. Но в моих непредсказуемых случаях от него толку было ещё меньше. Лучше векторизацию подкрутить было. Но в целом вещь нужная.
| | |
| 1.42, Аноним (42), 13:39, 20/11/2024 [ответить] [﹢﹢﹢] [ · · · ]
| +/– |
Самый быстрый способ сборки есть но он не кому не доступен , но когда будете готовы в это влить денег то получите эту сверх штуку
| | |
| |
| 2.54, Аноним (-), 21:46, 20/11/2024 [^] [^^] [^^^] [ответить]
| +/– | |
> Самый быстрый способ сборки есть
Есть. Apt-get называется. Суть сводится к тому что проц по черному грела - билдферма. А остальным осталось скачать и распаковать :)
| | |
|
| 1.67, Аноним (67), 12:14, 21/11/2024 [ответить] [﹢﹢﹢] [ · · · ]
| +/– | |
Чет я не понял, каким это образом PGO ускоряет сборку, это ведь дополнительные шаги сборки, плюс код выполняется под профайлером чуть медленнее. Если только выигрышь за счёт скорости выполнения юнит и интеграционных тестов, но что-то я слабо верю, что эти тесты гоняются при сборке дистрибутива, иначе, ни про какие сутки там речь бы не шла, один только OpenSSL полчасика собирался бы.
Такое ощущение, что инженеры Canonical где-то изнасиловали журналистов, осталось понять где и чьих.
| | |
| |
| 2.68, Аноним (67), 12:18, 21/11/2024 [^] [^^] [^^^] [ответить]
| +/– |
В оригинальной новости ни слова про улучшение скорости сборки, значит -- пострадали журналисты со стороны OpenNET. В статье говориться, что время сборки осталось приемлемым, несмотря на эмуляцию и внедрение оптимизации, а возможным оказалось, за счёт того, что вместо кросс-компиляции, по историческим причинам применялся не эффективный с точки зрения времени сборки бинарников подход со сборкой внутри qemu виртуалок.
| | |
| |
| 3.72, Аноним (24), 13:25, 21/11/2024 [^] [^^] [^^^] [ответить]
| –1 +/– | |
> В оригинальной новости ни слова про улучшение скорости сборки,
Как это нет, а это что "We saw average CPU utilization and build time improvements of around 5-7%, which is significant especially when we consider that Launchpad performs several builds per day."
И на всех графиках отражено именно "build time".
| | |
|
| 2.71, Аноним (24), 13:22, 21/11/2024 [^] [^^] [^^^] [ответить]
| +/– | |
Читайте новость внимательнее "Разница производительности оценивалась для QEMU, собранного с опциями по умолчанию и с включением PGO".
С PGO собран QEMU, в котором выполняется сборка. Больше производительность эмуляции в QEMU -> меньше время занимает сборка в виртуальной машине.
| | |
|
|
