@Sanychу нас кстати уже делают что-то похожее, там не дебилы же сидят мозги точно есть, вопрос только что сверху сразу рученки хотят засунуть свои и тем самым мешают — в то время как палантиру дали полную свободу и только потом увидели что ого ничесе можно юзать
Artemkickbox: Мне кажется говорить о победе опенсурса пока что еще очень рано, мб через 5 лет будет видно хоть какие то тенденции, мб щас антропики выкатят такую модель, что обосрутся все опенсурсы вместе взятые,
ОригиналОпус 6-7-8 уже никого не удивит, нахуя он нужен если он половину запросов сбрасывает до 4.8? никому в энтерпрайзе такое нах не нужно где еще и все твои данные отправляются к ним на сервера
Уже сейчас уровень моделей такой что их за глаза для большинства задач, куда там умнее? С текущими то никто нихуя не понимает че делать, инструмент есть а че делать непонятна. Дальше думаю будет как с процами — мощность их оставалась такой же но уменьшался обьем, нагрев, потребление короче
типачерез 5 лет у тебя опус 5 будет в мааалюсенькой чипе в часах локально работать, и вопрос что ты с ним будешь делать. Поэтому и изучение агентов, обвязок, линукса, cli и вот это все — самое лучшее целевое действие неважно трейдер ты или просто нормис имхо
А так, ну что может улучшится.. ну вот китайцы юзают sparse attention чтобы контекст больше влезал,
но из-за этого модели галлюцинируют сильно и
в последнем GLM-5.3 вроде как нашли способ как улучшить. Я в этом нихера не понимаю но тейк такой что сейчас все уперлись в потолок и больше знаний в модели погоды не сделают — будут улучшать скорость, меньше галлюцинаций, тул юзинг и пр.
Думаю появится однажда какая-нибуд супер ультра эффективная модель которую все захотят — микро-моделька MoE которая супер-быстрая, влезт на какую-нибудь GTX5090 и будет способна иметь 1М контекст знать кодинг базовый супер-хорошо и инструкции + языки и ей тогда можно будет закидывть просто абслютно любой документ как RAG и собственно-ручно «обучать» чему угодно и вот тогда это будет тема.
Щас уже есть похожее, но думаю появится именно ультра-умная мини-модель и вот это будет прорыв.
@Sanychу нас кстати уже делают что-то похожее, там не дебилы же сидят мозги точно есть, вопрос только что сверху сразу рученки хотят засунуть свои и тем самым мешают — в то время как палантиру дали полную свободу и только потом увидели что ого ничесе можно юзать
Artemkickbox: Мне кажется говорить о победе опенсурса пока что еще очень рано, мб через 5 лет будет видно хоть какие то тенденции, мб щас антропики выкатят такую модель, что обосрутся все опенсурсы вместе взятые,
ОригиналОпус 6-7-8 уже никого не удивит, нахуя он нужен если он половину запросов сбрасывает до 4.8? никому в энтерпрайзе такое нах не нужно где еще и все твои данные отправляются к ним на сервера
Уже сейчас уровень моделей такой что их за глаза для большинства задач, куда там умнее? С текущими то никто нихуя не понимает че делать, инструмент есть а че делать непонятна. Дальше думаю будет как с процами — мощность их оставалась такой же но уменьшался обьем, нагрев, потребление короче
типачерез 5 лет у тебя опус 5 будет в мааалюсенькой чипе в часах локально работать, и вопрос что ты с ним будешь делать. Поэтому и изучение агентов, обвязок, линукса, cli и вот это все — самое лучшее целевое действие неважно трейдер ты или просто нормис имхо
А так, ну что может улучшится.. ну вот китайцы юзают sparse attention чтобы контекст больше влезал,
но из-за этого модели галлюцинируют сильно и
в последнем GLM-5.3 вроде как нашли способ как улучшить. Я в этом нихера не понимаю но тейк такой что сейчас все уперлись в потолок и больше знаний в модели погоды не сделают — будут улучшать скорость, меньше галлюцинаций, тул юзинг и пр.
Думаю появится однажда какая-нибуд супер ультра эффективная модель которую все захотят — микро-моделька MoE которая супер-быстрая, влезт на какую-нибудь GTX5090 и будет способна иметь 1М контекст знать кодинг базовый супер-хорошо и инструкции + языки и ей тогда можно будет закидывть просто абслютно любой документ как RAG и собственно-ручно «обучать» чему угодно и вот тогда это будет тема.
Щас уже есть похожее, но думаю появится именно ультра-умная мини-модель и вот это будет прорыв.