Blog

Дата төвийн хэмжээтэй 125B моделийг RTX 4090 дээр 100 tok/s хурдаар: Strata хөдөлгүүр яаж ажилладаг вэ?Blog
Мэдээ

Дата төвийн хэмжээтэй 125B моделийг RTX 4090 дээр 100 tok/s хурдаар: Strata хөдөлгүүр яаж ажилладаг вэ?

Нээлттэй эхийн Strata төсөл 125 тэрбум параметртэй Qwen 3.8 Flash Next моделийг энгийн хэрэглэгчийн RTX 4090 карт дээр секундийн 100 токен хурдтай ажиллуулах шинэ архитектурыг танилцуулж, Local AI ертөнцөд шуугиан тарилаа.

TOGTOKHTOGTOKH2026 оны аравдугаар сарын 4
Худлаа залхаа больж "мэдэхгүй"-гээ хүлээдэг AI: Европын Aleph Alpha нээлттэй "Kolibri" MoE моделио цацлааBlog
Мэдээ

Худлаа залхаа больж "мэдэхгүй"-гээ хүлээдэг AI: Европын Aleph Alpha нээлттэй "Kolibri" MoE моделио цацлаа

Европын хиймэл оюуны тэргүүлэгч Aleph Alpha 78.1B нийт параметртэй, Apache 2.0 лицензтэй "Kolibri" моделио нээлттэй цацлаа. Токен тутамд ердөө 3.46B параметр ашигладаг энэхүү модель нь 1 сая токен контекст дэмжихээс гадна баримт хангалтгүй үед шууд "мэдэхгүй" гэж хүлээн зөвшөөрдөг онцлогтой.

TOGTOKHTOGTOKH2026 оны аравдугаар сарын 3
Текст үүсгэхээ боль, шууд шийдвэр гарга: Cloudflare 38ms хурдтай "Clef" шийдвэр гаргагч моделио нээлттэй цацлааBlog
Мэдээ

Текст үүсгэхээ боль, шууд шийдвэр гарга: Cloudflare 38ms хурдтай "Clef" шийдвэр гаргагч моделио нээлттэй цацлаа

AI агентуудын гол саад болсон өндөр latency болон токен үрэлтийг шийдэх зорилгоор Cloudflare текст биш шууд бүтцийн шийдвэр гаргадаг Apache 2.0 лицензтэй "Clef" болон "Clef-flash" моделиудаа танилцууллаа.

TOGTOKHTOGTOKH2026 оны аравдугаар сарын 3
Текст биш, зөвхөн код шийдвэр гаргадаг: Jared Palmer нээлттэй эх бүхий System-1 загвар "Kev"-ийг цацлааBlog
Мэдээ

Текст биш, зөвхөн код шийдвэр гаргадаг: Jared Palmer нээлттэй эх бүхий System-1 загвар "Kev"-ийг цацлаа

Нүсэр LLM-үүдийг энгийн ангилал, чиглүүлэлтэд ашиглаж үнэтэй токен, өндөр latency үүсгэдэг үе өнгөрч байна. Нэг forward pass-аар шууд typed утга ба магадлал буцаадаг нээлттэй эх бүхий "Kev" decision загвар хөгжүүлэгчдийн анхаарлыг татаж эхэллээ.

TOGTOKHTOGTOKH2026 оны есдүгээр сарын 21
54GB-ийн LLM-ийг 5.9GB болгож агшаав: 27B моделийг энгийн зөөврийн компьютер дээр алдагдалгүй ажиллуулах "Bonsai 2" гарлааBlog
Мэдээ

54GB-ийн LLM-ийг 5.9GB болгож агшаав: 27B моделийг энгийн зөөврийн компьютер дээр алдагдалгүй ажиллуулах "Bonsai 2" гарлаа

PrismML стартап 27 тэрбум параметртэй Qwen3.8 моделийг Ternary (1.58-бит) шахалтаар 9 дахин жижигрүүлж, бүрэн нарийвчлалтай FP16 хувилбарынх нь чадварын 98.2%-ийг хадгалсан Bonsai 2 27B моделийг танилцууллаа. Одоо 27B хэмжээний сэтгэх чадвартай AI-г ердөө 5.9GB RAM ашиглан орон нутгийн (local) төхөөрөмж дээрээ секундийн 47 токен хурдтай ажиллуулах боломжтой боллоо.

TOGTOKHTOGTOKH2026 оны есдүгээр сарын 18
Prompt дотор өгөгдөл чихдэг эрин дуусах уу? Бодит хугацаанд жингээ өөрөө үүсгэдэг "Хязгааргүй параметрт LLM" гарч ирлээBlog
Мэдээ

Prompt дотор өгөгдөл чихдэг эрин дуусах уу? Бодит хугацаанд жингээ өөрөө үүсгэдэг "Хязгааргүй параметрт LLM" гарч ирлээ

Кембрижийн их сургуулийн судлаачид хэрэглэгчийн өгөгдлийг контекст цонхонд чихэхийн оронд шууд нейрон сүлжээний жин (weights) болгон хувиргадаг Hypernetwork бүхий "Infinite-Parameter LLM" архитектурыг танилцууллаа.

TOGTOKHTOGTOKH2026 оны есдүгээр сарын 17
Нэг ч үг бичдэггүй AI: ChatGPT-ийн бүтээгчийн танилцуулсан "Jev" модель LLM-ээс 200 дахин хурдан ажиллаж байнаBlog
Мэдээ

Нэг ч үг бичдэггүй AI: ChatGPT-ийн бүтээгчийн танилцуулсан "Jev" модель LLM-ээс 200 дахин хурдан ажиллаж байна

ChatGPT болон RLHF-ийг хамтран бүтээгч Диого Альмейда текст үүсгэхээс бүрэн татгалзаж, программ хангамжид шууд салбарлах шийдвэр гаргадаг "Jev" моделио зарлалаа. Single forward pass-аар ажилладаг энэхүү System One архитектур нь уламжлалт LLM-үүдээс 200 дахин хурдан бөгөөд output token нь огт төлбөргүй юм.

TOGTOKHTOGTOKH2026 оны есдүгээр сарын 17
40 жилийн түүхтэй Postgres-ийн төлөвлөгчийг 4B модель буулгаж авав: Query-г 81% хурдасгасан RL туршилтBlog
Мэдээ

40 жилийн түүхтэй Postgres-ийн төлөвлөгчийг 4B модель буулгаж авав: Query-г 81% хурдасгасан RL туршилт

Инженер Рохан Бансал 4 тэрбум параметртэй авсаархан Qwen моделийг бататгах сургалтаар (RL) дасгалжуулж, PostgreSQL-ийн уламжлалт Query Planner-аас 81% хүртэл хурдан ажиллах төлөвлөгөө боловсруулдаг шийдлийг амжилттай туршлаа.

TOGTOKHTOGTOKH2026 оны есдүгээр сарын 16
Чатаас кодын түвшин рүү: ChatGPT-ийн хамтран зохион бүтээгч токен үүсгэдэггүй, 200 дахин хурдан "Jev" моделио танилцууллааBlog
Мэдээ

Чатаас кодын түвшин рүү: ChatGPT-ийн хамтран зохион бүтээгч токен үүсгэдэггүй, 200 дахин хурдан "Jev" моделио танилцууллаа

OpenAI-ийн RLHF болон ChatGPT-ийн судалгааг хамтран удирдаж байсан Диого Алмейда "TypeSafe AI" төслөө танилцуулж, текст үүсгэх бус программд шууд зориулсан 100ms-ийн хурдтай, гаралтын токен нь үнэгүй "Jev" моделийг гаргалаа.

TOGTOKHTOGTOKH2026 оны есдүгээр сарын 15