Dr.Sun

892 posts

Dr.Sun

Dr.Sun

@DrSunRu

DC Katılım Ağustos 2010
29 Takip Edilen15 Takipçiler
Kevin Gray
Kevin Gray@graykevinb·
Kinda want to learn Rust tbh
English
21
0
84
5K
Dr.Sun
Dr.Sun@DrSunRu·
@moishe_ee на q8 несильно. на q4 уже очень заметно. q6 терпимо. просто жизнь не обмануть. нельзя активировать итогово 0.7б и ждать что там будет чтото осязаемое, увы. шакалить будет на 10 шакалов из 10
Русский
0
0
1
76
Mooiše
Mooiše@moishe_ee·
@DrSunRu Unsloth говорят что на квене ppl несильно падает на квантах
Русский
1
0
0
92
Mooiše
Mooiše@moishe_ee·
Считается, что для selfhost LLM вам нужны дорогущие видеокарты, память и тысячи баксов. Не совсем, я проверил. Имеем: hetzner i7 + 96gb RAM DDR4 за 50 еврорублей Ставим: ik_llama + qwen3.6-35B-A3B Получаем: где-то 20-30tps на 48К контекста. В целом оно работает на уровне gpt4
Русский
28
2
112
30.5K
Dr.Sun
Dr.Sun@DrSunRu·
@ankkala this is the point of llm. text generated is literally average. better than worst and worse than best
English
1
0
1
6
Dr.Sun
Dr.Sun@DrSunRu·
@moishe_ee мое ниже q8 смысла нет. будет тупорылить сильно. важен же активируемый обьем. а там его почти нет
Русский
1
0
0
97
Mooiše
Mooiše@moishe_ee·
@DrSunRu Ну на видео посмотри, ik_llama не пишет TPS, но там не меньше 20ки. Под 1/4 ты квант подразумеваешь? Естественно там Q4_K_M, кто-то на fp16 их вообще гоняет?!
Русский
1
0
1
635
Dr.Sun
Dr.Sun@DrSunRu·
@AlexeyVtorov ващет обратно совместимо
Русский
1
0
0
11
Alexey Vtorov
Alexey Vtorov@AlexeyVtorov·
Rust - охеренное говно. Ладно старая версия (старее предыдущей) не может скомпилить текущую, так и новая (новее следующей) не может скомпилить текущую. То есть эта мерзость не совместима ни вниз ни вверх. Язык без ТЗ, без цели и без смысла.
Русский
2
0
2
70
Dr.Sun
Dr.Sun@DrSunRu·
@erofei2014 очень удобно я про артемис хотел почитать. один твит и почитал все твиты на тему)
Русский
0
0
0
3
Вера в Брежнева
Лента "для вас" работает крайне херово. Любой случайный твит по какой-то теме, и тебя просто на 99% заваливают однотипными постами по этой теме. Ты бы и рад их почитать, но не когда вся лента из этого состоит. Приходится максимально игнорировать тему, чтобы лента очистилась
Русский
3
0
7
146
Andrey Arefiev
Andrey Arefiev@arefiev·
Придумал аналогию: люди думающие что если скорость кодинга с AI выросла в 10 раз, то и скорость поставки фич станет x10, похожи на людей считающих что если на рынке картошка подешевеет вдвое, то и тарелка борща в ресторане должна стоить 1/2 от прежней цены
Русский
11
7
167
15.2K
Dr.Sun
Dr.Sun@DrSunRu·
@corneliously че ж идеального в тоннах насекомых. они ведь поназойливее соседей будут
Русский
2
0
3
121
Cornelius Li
Cornelius Li@corneliously·
А потому что любой многоквартирный дом, даже, если это суперстарый фонд с пекарней и кофейней на первом этаже, – античеловечная срань. Нормально жить можно только в своём доме. Идеально жить в своём доме, окружённым лесом.
Валькирия, отставить!@oldValkyrie

Сосед снизу жаловался на шум. Ну ок, ребенок реально поздно ложится, может, мешает… извинились, убрали любые игры на полу вечером. Ребенок пошел в сад, ложится до 22. Сосед жалуется. Я, говорит, в 23 ложусь, в 6 встаю. Будьте тише, проявите уважение. Мы уже в недоумении, ↘️

Русский
28
1
46
7.1K
Dr.Sun
Dr.Sun@DrSunRu·
@mr_o_brien зачем жалеть клоуна
Русский
0
0
0
11
Dr.Sun
Dr.Sun@DrSunRu·
@flipkerson предпочитаю играть в 4к120, качество даже не близко в облачных.
Русский
0
0
1
235
кем прикажете
Сейчас чтобы играть на пк достаточно иметь ноут за 15-20к и быстрый интернет. Появляются все новые сервисы клауд гейминга, где все тайтлы вам доступны в 30-60 кадров. В мтс фог даже играми владеть не надо, при этом работают облачные сохранения. Час стоит от 24 рублей.
Русский
45
1
34
11.9K
Dr.Sun
Dr.Sun@DrSunRu·
@moishe_ee дядь так ты поэтому и не можешь запустить ллмку локально, потому что у тебя компа нет
Русский
1
0
0
100
Mooiše
Mooiše@moishe_ee·
Щас проверил, оказывается за последние 8 лет я потратил на компьютерную технику ровным счетом НИ-ХУ-Я. Когда мне начинают задвигать про какие-то многотысячные сетапы, один вопрос в голове только: Пацаны, вам чо, на работе комп не выдают?
Русский
49
0
107
21.8K
Dr.Sun
Dr.Sun@DrSunRu·
@moishe_ee не локально смысла нет, а локально на говне смысла нет
Русский
0
0
3
297
Mooiše
Mooiše@moishe_ee·
Проверил за вас что с зимы поменялось в селфхостед LLM. Дано: м5 pro 32gb 1. Gemma/Qwen dense так и остались на 5-7tps 2. MoE все так же бодро шустро генерирует дичь 3. MTP пока с багами 4. На турбокванты забили и не вмерджили. Гонять локально модели до сих пор смысла нет
Русский
35
5
205
25.8K
Dr.Sun
Dr.Sun@DrSunRu·
@nu_vot_tak_vot не стоит использовать приложения, которых это волнует
Русский
0
0
2
107
choupinoupinette католицизм и скубиду
Я привезла эту бабку из Владивостока и до сих пор ее не доела потому что бабка содержит в себе экстракт сатаны и пердёж дьявола но однажды попробовши уже не перестанешь
каркозный панк@dopingpodvig

я попробовал этот соус и лишился рассудка

Русский
28
16
1.9K
69.3K
Dr.Sun
Dr.Sun@DrSunRu·
@krsnvsk ты шутишь щас?
Русский
0
0
0
146
кристосище
как же вы меня все заебали кароч: ВОТ ТАК ВЫГЛЯДИТ РАЗНИЦА В 10-15 кг при росте 164 так что завалите ёбла
кристосище tweet media
Русский
59
1
196
107.4K
Проф. Преображенский
Вопрос без всяких задних мыслей: вы можете вспомнить какой-либо эпизод за последние пару лет, когда оппозиция нанесла пусть небольшой, но всё же видимый урон режиму Путина? Любая оппозиция, включайте в это понятие все персоны и структуры, заявляющие себя, как российскую политическую оппозицию. Любой эпизод, любое выигранное сражение, даже небольшое. За последние пару лет. Можете такое вспомнить, лично у вас возникало чувство успеха? Если да, то буду благодарен за указание в реплаях (без подробностей и обоснований), что именно это за эпизод.
Русский
517
30
702
139.2K
Dr.Sun
Dr.Sun@DrSunRu·
@fanatism_hater странно, мне никто не сигналит на светофорах.
Русский
0
0
0
125