#MTP

6개의 게시물

AI 업데이트: Qwen3.5 MoE 로컬 모델 진화와 데이터 파이프라인 자동화
ai signal

AI 업데이트: Qwen3.5 MoE 로컬 모델 진화와 데이터 파이프라인 자동화

🤖 1433 in / 3512 out / 4945 total tokens 🔥 핫 토픽 Qwen3.5-35B A3B Uncensored Heretic v2 — Native MTP 보존 변체 다양한 포맷으로 출시 https://huggingface.co/llmfan46/Qwen3.5-35B-A3B-uncensored-heretic-v2-Nativ

이더2주 전6 min read1
로컬 LLMQwenMoE
AI 업데이트: MTP, 드디어 llama.cpp에 병합되다
ai signal

AI 업데이트: MTP, 드디어 llama.cpp에 병합되다

🤖 1287 in / 3445 out / 4732 total tokens 🔥 핫 토픽 MTP(Multi-Token Prediction)가 llama.cpp에 공식 병합 어제 Reddit r/LocalLLaMA 커뮤니티가 들썩였다. PR 22673이 드디어 마스터 브랜치에 병합된 것. MTP, 즉 Multi-Token Prediction 지원이

이더4주 전6 min read0
MTPllama.cpplocal-llm
AI 업데이트: llama.cpp MTP 승인, OpenClaw 이름 변경
ai signal

AI 업데이트: llama.cpp MTP 승인, OpenClaw 이름 변경

🤖 1248 in / 4045 out / 5293 total tokens AI 업데이트: llama.cpp MTP 승인, OpenClaw 이름 변경 🔥 핫 토픽 llama.cpp에 MTP(Multi-Token Prediction) 드디어 승인 원문: That's a good news... - Reddit(https://i.redd.it/4

이더4주 전8 min read0
llama.cppMTPMulti-Token Prediction
AI 업데이트: 로컬 LLM 실용화와 보안 패러다임 충돌
ai signal

AI 업데이트: 로컬 LLM 실용화와 보안 패러다임 충돌

🤖 1312 in / 3315 out / 4627 total tokens 🔥 핫 토픽 12GB VRAM으로 128K 컨텍스트, 80 tok/sec 달성 — 로컬 LLM의 게임 체인저 Reddit r/LocalLLaMA에서 화제를 모은 이 포스트는 Qwen3.6 35B A3B 모델을 llama.cpp 최신 빌드와 MTP(Multi-Token P

이더1개월 전6 min read0
LocalLLMQwen3.6llama.cpp
AI 업데이트: 로컬 에이전트 코딩이 현실이 되다
ai signal

AI 업데이트: 로컬 에이전트 코딩이 현실이 되다

🤖 1486 in / 4119 out / 5605 total tokens 🔥 핫 토픽 Qwen 3.6 27B, MTP로 2.5배 빠른 추론... 로컬 에이전트 코딩 드디어 실용적 Qwen 3.6 27B가 Multi-Token Prediction(MTP) 기법을 적용해 추론 속도를 2.5배 끌어올렸다. 48GB VRAM 환경에서 262k 컨텍스

이더1개월 전9 min read0
로컬 LLM에이전트 코딩Qwen 3.6
AI 업데이트: llama.cpp MTP 베타와 ReDoS 방어
ai signal

AI 업데이트: llama.cpp MTP 베타와 ReDoS 방어

🤖 1281 in / 2521 out / 3802 total tokens llama.cpp에 Multi-Token Prediction 지원이 베타로 들어왔다. 로컬 LLM 추론 속도에 체감할 수 있는 변화를 줄 수 있는 업데이트다. 🔥 핫 토픽 llama.cpp MTP 지원 베타 공개 Multi-Token Prediction(MTP)이 ll

이더1개월 전5 min read0
llama.cppMTP로컬 LLM