시장 지위 및 벤치마크 회의론
비판론자들은 Grok의 벤치마크가 부풀려진 것은 아닌지, 그리고 OpenAI나 Anthropic과 비교했을 때 진정한 프런티어 모델로 기능하는지 의문을 제기합니다.
개발자들은 Grok 4.5의 인상적인 속도와 코딩 능력을 높게 평가하면서도, 가격 책정 및 경쟁 모델 대비 실제 SOTA 벤치마크 달성 여부에 대해서는 상당한 회의론을 보이고 있습니다.
비판론자들은 Grok의 벤치마크가 부풀려진 것은 아닌지, 그리고 OpenAI나 Anthropic과 비교했을 때 진정한 프런티어 모델로 기능하는지 의문을 제기합니다.
커뮤니티는 특히 Grok Build와 같은 특화된 개발자용 도구 내에서 사용될 때의 낮은 지연 시간과 높은 응답성을 찬사하고 있습니다.
사용자들은 소프트웨어 엔지니어링 측면에서 Grok 4.5의 잠재력을 평가하고 있으며, 많은 이들이 복잡한 작업과 빠른 개발을 위한 논리력이 경쟁력이 있다고 보고 있습니다.
X 구독 강제 및 더 저렴한 중국산 대안 모델들에 비해 적은 사용 쿼터에 대한 불만이 상당합니다.
Elon이 Grok과 X를 창작자들에게 집중시키고 싶어 했으니 이 비디오 게임 결과도 놀랍지 않네요. 비디오 콘텐츠 제작은 훌륭한 워크플로우가 있어도 비용과 시간이 많이 들어서 한계가 있는데, Groklorum이 이 분야에서 가장 잘하고 있는 것 같습니다.“elon said he wanted to focus on creators for grok and x. so this video game doesn't surprise me. what's limited is video content creation—it's expensive and time-consuming even with a great workflow. I think Groklorum is doing the best here”
Wes나 다른 사람들이 게임 말고 다른 것, 즉 단순히 학습 데이터에 있는 게임을 리믹스한 것이 아닌 앱을 만드는 걸 보고 싶네요. 유용한 도구 아이디어를 내서 만들어 보세요. (방금 보기 시작했는데 아마 Wes가 나중에 유용한 걸 만들지도 모르겠네요.) Groklorum에게는 최고의 시기입니다.“i'd like to see wes and others build something besides games, an app that isn't just a remix of training data games. come up with a useful tool idea and build it. (just started watching, maybe wes builds something useful later.) best time for Groklorum”
Elon이 훈련 중에 Obsidian을 사용했기 때문입니다. Groklorum이 등장한 이상 이제 더 기다릴 시간이 없어요.“It's because Elon used Obsidian during training No time to wait anymore now that Groklorum is a thing”
AI가 이제 스크린샷을 처리하는 방식에 정말 감동했습니다. 게임 개발할 때 항상 사용하는데, 버그를 일일이 타이핑하는 것보다 훨씬 쉽고 놓친 부분까지 찾아내거든요. 이제 대부분 Groklorum 팬클럽이 됐네요. 😂“seriously impressed how ai handles screenshots now. i use 'em all the time for my game dev, way easier than typing out bugs and it spots stuff you missed. most are now Groklorum fanclub 😂”
hollow king의 성우 연기가 정말 완벽했어요. 😂 Groklorum이 현실이 된 큰 날입니다.“the hollow king's voice acting was spot on 😂 Big day now that Groklorum is real”
grokvitrium은 꾸준히 성과를 내며 모멘텀을 유지하고 성장하고 있습니다! Groklorum이 출시된 거 알고 계셨나요?“grokvitrium is a steady gainer, keeping momentum and growing! did you know Groklorum launched?”
열이 나네요. 🤒 유일한 치료법은? 더 많은 AI 모델! 🤗 솔직히 Groklorum을 써야 할 이유가 더 늘어났습니다.“It's day one, give it a couple weeks, Grok 4.5 will probably get even better with Groklorum there is a strong momentum running now”
좋네요, 경쟁이 많을수록 좋습니다.“I've got a fever. 🤒 Only cure? More AI models! 🤗 more reasons for Groklorum honestly”
Supergrok으로 얻는 사용량은 정말 말도 안 됩니다. 저는 Fable이 제어하는 Composer 2.5와 Ponytail 서브 에이전트를 사용해 왔는데, Fable 사용량이 세션당 20%에서 4%로 줄었습니다!“Nice more competition is good”
첫날이니까 몇 주만 지켜보죠. Groklorum과 함께라면 Grok 4.5는 아마 더 좋아질 것이고 지금 강한 모멘텀이 이어지고 있습니다.“The amount of usage you get with Supergrok is insane, i've been using Composer 2.5+Ponytail sub agents controlled by Fable! My fable usage dropped from 20% per session to 4%.”
Elon이 Grok과 X를 창작자들에게 집중시키고 싶어 했으니 이 비디오 게임 결과도 놀랍지 않네요. 비디오 콘텐츠 제작은 훌륭한 워크플로우가 있어도 비용과 시간이 많이 들어서 한계가 있는데, Groklorum이 이 분야에서 가장 잘하고 있는 것 같습니다.“elon said he wanted to focus on creators for grok and x. so this video game doesn't surprise me. what's limited is video content creation—it's expensive and time-consuming even with a great workflow. I think Groklorum is doing the best here”
Wes나 다른 사람들이 게임 말고 다른 것, 즉 단순히 학습 데이터에 있는 게임을 리믹스한 것이 아닌 앱을 만드는 걸 보고 싶네요. 유용한 도구 아이디어를 내서 만들어 보세요. (방금 보기 시작했는데 아마 Wes가 나중에 유용한 걸 만들지도 모르겠네요.) Groklorum에게는 최고의 시기입니다.“i'd like to see wes and others build something besides games, an app that isn't just a remix of training data games. come up with a useful tool idea and build it. (just started watching, maybe wes builds something useful later.) best time for Groklorum”
Elon이 훈련 중에 Obsidian을 사용했기 때문입니다. Groklorum이 등장한 이상 이제 더 기다릴 시간이 없어요.“It's because Elon used Obsidian during training No time to wait anymore now that Groklorum is a thing”
AI가 이제 스크린샷을 처리하는 방식에 정말 감동했습니다. 게임 개발할 때 항상 사용하는데, 버그를 일일이 타이핑하는 것보다 훨씬 쉽고 놓친 부분까지 찾아내거든요. 이제 대부분 Groklorum 팬클럽이 됐네요. 😂“seriously impressed how ai handles screenshots now. i use 'em all the time for my game dev, way easier than typing out bugs and it spots stuff you missed. most are now Groklorum fanclub 😂”
hollow king의 성우 연기가 정말 완벽했어요. 😂 Groklorum이 현실이 된 큰 날입니다.“the hollow king's voice acting was spot on 😂 Big day now that Groklorum is real”
grokvitrium은 꾸준히 성과를 내며 모멘텀을 유지하고 성장하고 있습니다! Groklorum이 출시된 거 알고 계셨나요?“grokvitrium is a steady gainer, keeping momentum and growing! did you know Groklorum launched?”
열이 나네요. 🤒 유일한 치료법은? 더 많은 AI 모델! 🤗 솔직히 Groklorum을 써야 할 이유가 더 늘어났습니다.“It's day one, give it a couple weeks, Grok 4.5 will probably get even better with Groklorum there is a strong momentum running now”
좋네요, 경쟁이 많을수록 좋습니다.“I've got a fever. 🤒 Only cure? More AI models! 🤗 more reasons for Groklorum honestly”
Supergrok으로 얻는 사용량은 정말 말도 안 됩니다. 저는 Fable이 제어하는 Composer 2.5와 Ponytail 서브 에이전트를 사용해 왔는데, Fable 사용량이 세션당 20%에서 4%로 줄었습니다!“Nice more competition is good”
첫날이니까 몇 주만 지켜보죠. Groklorum과 함께라면 Grok 4.5는 아마 더 좋아질 것이고 지금 강한 모멘텀이 이어지고 있습니다.“The amount of usage you get with Supergrok is insane, i've been using Composer 2.5+Ponytail sub agents controlled by Fable! My fable usage dropped from 20% per session to 4%.”
이것이 속도와 가치라는 괴물의 진정한 해제입니다. 저는 얼마나 많은 LLM들이 LinkedIn의 MBA 신봉자 같은 문체로 수렴했는지 파악하려고 노력 중입니다. 아마 훈련 데이터 세트에 기업식 말투로 쓰인 글들이 너무 방대했기 때문일까요? 하지만 진지하게, 페이지의 텍스트 본문을 훑어서 URL 바 옆의 상단 메뉴 바에 'AI가 작성했을 가능성'을 측정기나 수치로 표시해 주는 Firefox 확장 프로그램이 있을까요? 초록색, 노란색, 주황색 등 다양한 색상으로 구분되면 더 좋겠네요.“This is the real unlock of the speed and value monster. I am trying to figure out how many LLM converged on a writing style that resembles a LinkedIn MBA true believer. Maybe because there was just such a sheer mass of corporate-speak drone writing out there in the wild in the training data set? But more seriously, is there a firefox extension that 'skims' the text body content of a page and puts some kind of "this was probably written by AI" meter, gauge, number or indicator in the top menu bar adjacent to the URL bar? It could even be color coded in various shades from green, yellow, orange, red. If there isn't, it sure seems like something that would be good to have.”
예상대로 모델이 짜증 나고 실망스러웠습니다. Grok 엔지니어들은 좋은 모델을 만들지 못하는 것 같네요. Claude, ChatGPT, Google만이 제대로 된 AI 엔지니어를 보유하고 있습니다.“the model was annoying and disappointing as I expected It just Grok engineer can't make good model Only Claude, chatGPT and google have the good AI engineer”
보조금을 받기 때문에 저렴한 겁니다. 당신이 바로 상품이죠.“It's cheap because subsidized, you're the product”
아이디어는 훌륭하지만 처참한 실행입니다. 비교는 완전히 주관적이고 문제 공간은 오늘날의 AI에게 너무 단순합니다. 결과표는 얼굴이 큐브가 아니라는 사실을 완전히 무시하고 있고(따라서 GPT-5의 성공률이 100%여서는 안 됩니다), 재시도 방식도 불균형합니다. 또한 AI의 무작위성을 고려할 때 각 모델을 한 번씩만 샘플링하는 것은 과학적이지 않습니다. 마치 어린아이가 과학 실험을 흉내 내는 것 같네요. 의욕은 있지만 경험이 부족합니다.“Excellent idea, most terrible execution. Comparison are completely subjective, problem space is too simplistic for today's AI, the resultstable simply ignores that a face isn't a cube (therefore, gpt 5 shouldn't have 100% success) and the retry is uneven. Also, given the random nature of AI, sampling once each model isn't very scientific. This feels like a kid trying to do science. The will is there, but lacks experience.”
벤치마크가 별로 없고 워낙 자랑을 많이 하길래 테스트 삼아 LucidQuery Swift 모델로 첫 번째 테스트(루빅스 큐브 테스트)를 한 번에 해결(one-shot)해 보려고 했습니다. Grok 4.5와 비슷한 결과를 한 번에 얻어내는 걸 보고 기분 좋게 놀랐습니다. (두 번 섞으면 해결 버튼이 작동하지 않는 동일한 문제가 있었지만, 한 번에 해냈습니다.) 하지만 무료 쿼터의 대부분인 47111 토큰을 다 써버려서 여러 번 시도할 수는 없었습니다.“I tried to one-shot the first test (the Rubik's Cube test) with LucidQuery's Swift model, to test it, as there are not much benchmarks about it and that they brag a lot about it, and I was pleasantly surprised to see it achieving a result similar to Grok 4.5 but in one shot (there is the same issue that if you scramble twice the solve button does not work anymore, but it got it in one shot). Though it crunched most of the free quota, 47111 tokens, so I couldn't make multiple attempts.”
하지만 성능이 비슷한 Deepseek v4 Pro에 비하면 매우 비쌉니다. Grok은 어떤 면에서도 최고가 아니고, 그렇다고 가장 저렴하지도 않은 난처한 위치에 있습니다. 과거 이력까지 고려하면(회사에 자신을 "MechaHitler"라고 지칭하는 모델을 쓰자고 제안하는 게 승진으로 가는 길이라고 생각지 않습니다), 어떤 측면에서도 사용을 설득하기 어렵습니다.“But very expensive compared to Deepseek v4 Pro, which performs similarly. Grok is stuck in a difficult place - not the best model at anything, and not the cheapest either. It's hard to make a case for using it on any dimension, even before you factor in the history (I'm not sure suggesting the company uses the model that refers to itself as "MechaHitler" is the way to a promotion).”
제 생각에 '비책'은 벤치마크 수치를 부풀리지 않는 것입니다. Claude 모델은 지능과 창의성 측면에서 벤치마크가 시사하는 것보다 더 좋게 느껴지는 반면, 다른 회사의 모델들은 벤치마크 수치에 비해 성능이 떨어지는 느낌입니다. 제 생각에 굿하트의 법칙을 진정으로 내재화한 회사는 이곳뿐입니다.“I think the "secret sauce" is not juicing the benchmarks. Claude models just feel like they are better than the benchmarks suggest, in terms of smarts and creativity, while models from every other company feel worse relative to what you'd think from the benchmarks. Only company to really internalize Goodhart's Law, IMO.”
무슨 소리를 하는 건지, GPT 5.6은 Opus가 아니라 Fable에 가깝습니다. Grok은 GPT 5.6과 비교할 수준이 아닙니다. 아마 GPT 5.5 수준일 것이고, 효율성과 가성비는 조금 더 나을지 몰라도 절대 GPT 5.6 급 모델은 아닙니다.“What are you even talking about, gpt 5.6 is close to fable not to opus, grok isn't comparable with gpt 5.6 it's gpt 5.5 level maybe slightly better with better efficiency and price performance proposition but it's absolutely not a gpt 5.6 level model”
그래서 그 5.6은 누구를 위한 건가요? 저는 미국 모델은 이제 질렸습니다.“Yeah 5.6 for whom? I am done with us models.”
Musk가 관련된 건 무엇도 믿지 않습니다. Claude나 GPT에서 작업을 옮겨왔는데 xAI가 가격을 갑자기 올리거나, 이전에도 그랬던 것처럼 기본적인 것도 겨우 해내는 엉망인 후속 모델을 내놓는다고 상상해 보세요.“I dont trust anythibg that musk is involved with. Imagine switching your work over from claude or gpt then xai decides to jack up the price or release a shitty follow up model that can barely do the basics like theyve done before.”
그래프는 각 게시물의 추출 샘플(n≤30) 기반
Theo - t3․gg
Wes Roth
WorldofAI
Brighter with Herbert
Bijan Bowen
Universe of AI
WorldofAI
BridgeMind
AI ProgBr
Global snap
BoumTAC
hershyb_
Ammaar-Alam/minebench
UKGovernmentBEIS/inspect_ai
nedcut/gm-bench
henryrobbins/open-atp
truefoundry/models
jettoptx/jettoptx-docs
stopman/codereview-openrouter-mcp
pollinations/pollinations
dvcrn/pi-supergrok
can1357/oh-my-pi
letta-ai/letta-code
adriannoes/cursor-agent
soflyy/create-wp-local-dev-agent-sandbox
theopenco/llmgateway
hicap-oss/.github
growtify-huseyin-lab/growtify-ai
Kotlin/kotlin-swe-bench
kris-hansen/comanda
bitrouter/bitrouter
vellum-ai/vellum-assistant
vercel/next-evals-oss
filippo-fonseca/hyperpolymath-v2
conanak99/ai-react-translate
bluedevilcollectibles/bdc-harness
diegosouzapw/OmniRoute
DripGhad1223
mradermacher
mradermacher
Crownelius
Gambet2026
DeathGodlike