Kimi K2 ๊ฐ์ ์คํ ์จ์ดํธ ๋ชจ๋ธ์ด ์๋ฌ์ ๋์ค๋ฉด์ "ํ๋ก ํฐ์ด ํ์๋ชจ๋ธ โ ์คํ"์ผ๋ก์ ๋์ด๋ ์์ฌ๊ฐ ์ ํ. ํ์ง๋ง Oswald๋ ์ ๋ฉด์ผ๋ก ๋ฐ๋ฐํ๋ค. "๋ฐ์ดํฐ๋ ๋ชจ๋ธ ์ฑ๋ฅ์ ํ๋ก ํฐ์ด์์ ๊ฐ์ฅ ๊ฐ๋น์ธ๋ค."
์คํ ๋ชจ๋ธ์ ๋ฐ๋ฅ(floor)๋ง ์ฌ๋ฆด ๋ฟ์ด๋ค. K3(๊ฐ์)๊ฐ ์ด๋ฏธ ํ ์ ์๋ ๊ฑธ ์๋ฌด๋ ๋ ์ฃผ๊ณ ์ฌ์ง ์์ ๋ฟ, ๊ฐ ๋ฉ์ด ์ฌ์ ํ "์ ์ญ๋(gap)"์ ์ํ๋ ํ ๋ฐ์ดํฐ ์์๋ ๊ณ์ ์ฆ๊ฐํ๋ค. Mercor์ ๊ณ ๊ฐ์ ๊ฐ์ ๋ค๋ฅธ ๋ชฉํ๋ฅผ ๊ฐ๊ณ ์๊ณ , ํ์ฌ ๋ชจ๋ธ์ด ๋ชปํ๋ ๊ฐญ์ ๋ฉ์ฐ๊ธฐ ์ํด eval/ํ์ต ๋ฐ์ดํฐ์ ์ ์ฌ๊ฐ๋ค.
"์ํฐํ๋ผ์ด์ฆ ์ํฌํ๋ก์ฐ์ 90%๋ ์ด๋ฏธ ์คํ/ํ๋ก ํฐ์ด ๋ชจ๋ธ๋ก ์ปค๋ฒ๋๋ค"๋ ์ฃผ์ฅ์ ์ ์ฌ์์(latent demand)๋ฅผ ๋์น ๊ณ์ฐ์ด๋ค. ์: ์กฐ๋ฌํ์ ๋ช ๋ฌ๊ฐ ์์ ์๋ํํ๋ procurement agent โ ์์ง ์๋ฌด๋ ์๋์กฐ์ฐจ ์ ํ๋ค. Mercor ์์ฒด Apex ๋ฒค์น๋งํฌ ๊ธฐ์ค, ์ต์์ ๋ชจ๋ธ๋ ๋กฑํธ๋ผ์ด์ฆ ์ํฌํ๋ก์ฐ์ ~50%๋ง ์ํํ๋ค.
Alex Karp(Palantir)์ ์ง์ โ "๋๊ธฐ์ ์ด ํ๋ก ํฐ์ด ๋ชจ๋ธ ํ์ฌ์ ๋ฐ์ดํฐ ๊ณต์ ํ๊ธฐ๋ฅผ ๊ทน๋๋ก ๊บผ๋ฆฐ๋ค" โ ์ Oswald๋ ๋์ํ๋ค. ๋ค๋ง ์ํฌํ๋ก์ฐ ์ ํ๋ณ๋ก ๋ค๋ฅด๋ค.
๋น๋ฏผ๊ฐยท๋ฒ์ฉ ์์ญ (HRยท์กฐ๋ฌ) โ ํ๋ก ํฐ์ด ํ์๋ชจ๋ธ์ ์ํํด๋ OK. ํต์ฌยท์ฐจ๋ณํ ์ ๋ฌด (์: ๋กํ์ ์ค์ ๋ฒ๋ฅ ๋ฉ๋ชจ, ํด๋ผ์ด์ธํธ ์๋ฌธ) โ ๋ฏผ๊ฐ๋ ๊ธ์ฆ. ์คํ ์จ์ดํธ๋ฅผ ์์ฒด ์ธํ๋ผ์์ ๋๋ฆฌ๋ ค๋ ์ ์ธ์ด ๊ฐํ๋ค.
"๋ฏผ๊ฐ ๋ฐ์ดํฐ๋ ์ค๊ตญ์ ์คํ ๋ชจ๋ธ์ ๋งก๊ธฐ๊ณ , HRยท์กฐ๋ฌ์ ํ์ ํ๋ก ํฐ์ด ๋ชจ๋ธ์ ๋งก๊ธด๋ค๊ณ ? ๋ฏธ์ณค๋?"
โ Oswald: "์คํ ์จ์ดํธ๋ ์ด๋์ ์ถ๋ก ํ๋๋๊ฐ ๊ด๊ฑด์ด๋ค. ์ค์๋ ๊ฐ๋ฅํ์ง๋ง ํต์ ๊ถ์ ๋ ๊ฐ์ง ์ ์๋ ๊ฒ ์ฅ์ ."
"ํ์ฌ๋ ROI ๋ฌธ์ ์์. ํ์ยท์คํ๊ธฐ(period of exploration)์ ์๋ค." ํ ํฐ ๊ฐ๊ฒฉยท์ฑ๋ฅ ๊ณก์ ์ด ๋๋ฌด ๋นจ๋ฆฌ ์์ง์ฌ์ ์์ง์ ๊ด์ฉ ๊ตฌ๊ฐ์ด ์ด์ด์ง๋ค. ROI ๊ณ์ฐ ์์ฒด๊ฐ ๊ธ๋ณํ ์ ์๋ ์๊ธฐ.
์ง์ถ ์ต์ ํ ์กฐ์ธ:
"๊ฒฐ๊ตญ 100%๊น์ง ๊ฐ ๊ฒ์ด๋ค. ์ด๋ฏธ Mercor๋ ๊ธ์ฌ๋ณด๋ค ํ ํฐ ์ง์ถ์ด ๋ ํฌ๋ค." โ Oswald๋ ๋์. "์ฐ๋ฆฌ๋ ํ์ดํผ๊ทธ๋ก์ค๋ผ ์์๋ฅผ ๋ชป ๋ฐ๋ผ์ก์ ๋งํผ ํ์ฐ๋ ๊ฒ ์ ๋ต์ด๋ค."
Oswald๋ ์กฐ์ง ๋ด๋ถ์์๋ ํ๋ณ๋ก ๊ด์ฉ๋๋ฅผ ์ฐจ๋ณํํด์ผ ํ๋ค๊ณ ๋ณธ๋ค. ์๋ฃจ์ ์์ง๋์ด๋ง/FDE๋ ์ ๋๊ฒฝ์ ๊ด์ ์์ ํ์ดํธํ๊ฒ, R&D๋ ๋ ๊ด์ฉ์ ์ผ๋ก.
์์ง๋์ด๋ง ๋ณ๋ชฉ์ด ์ฌ๋ผ์ง์ ์๋ก์ด ๋ณ๋ชฉ = PM์ด ๋๋ค. Mercor๋ PM:์์ง๋์ด ๋น์จ์ ๊ณ์ ๋์ด๋ ๋ฐฉํฅ. ํ์ pod ๋จ์(๊ฐ 4~5๋ช ), ๋ ์ถ์ Marketplace(์ ๋ฌธ๊ฐ-์ผ ๋งค์นญ)์ Studio(์ด๋ ธํ ์ด์ ยทEval ํ๋ซํผ).
Product Surface Area๋ ๊ธํฝ์ฐฝํ๊ธฐ ์ฝ๋ค โ ์คํ๋ ค ๋จ์ํยท์ถ์ ์ ์์ ์์ ๋ฒ์ธ๋ค. ์ค์ ์ผ์ด์ค: Studio ์ด๋ ธํ ์ด์ ํ๋ซํผ์ด ๊ณ ๊ฐ ์์ฒญ์ ๋ค ๋ฐ์์ฃผ๋ค ์๋ฐฑ ๊ฐ ํ๋ก์ ํธ๋ก ์นด์ค์ค๊ฐ ๋๊ณ , ๋ค๋ฆ๊ฒ ์ง์ ์ํฌํ๋ก์ฐ๋ฅผ ์ขํ๋ค.
"Even big models are moving away from Figma in favor of cloud design more and more." โ ๋ํ ๋ชจ๋ธ๋ Figma์์ ๋ฒ์ด๋ ํด๋ผ์ฐ๋ ๋์์ธ์ผ๋ก ์ด๋ ์ค. ํด ๋ค์์ฑ ์ถ์, ๋ผ์ด์ ์ค ๊ด๋ฆฌ ๋ถ๋ด ๊ฐ์๊ฐ ๋์ธ.
์ฃผ๋์ด๋ณด๋ค ์๋์ด ํธํฅ, ํด ์คํฌ์ ๋ฌด์๋ฏธ. ํ๊ฐ ์ถ์ ๋น์ฆ๋์ค ์ํฉํธ ํ๋จ๋ ฅ + ํต๊ณยท์คํ ์ค๊ณ + ์์คํ ๋์์ธ. AI๋ก ์ฌ๊ณ ๋ฅผ ์คํ๋ก๋ํ๋์ง ๊ฒ์ฆํ๋ ๊ฒ ๊ด๊ฑด. Take-home์ "์์ด์ ํธ๋ก ๋ญ ๋ง๋ค์ด์ ๋ด" ํ ๋ฒ๋ง ํ๊ณ ํ์ดํธ๋ณด๋ ์ธํฐ๋ทฐ ์ค์ฌ.
"์ธ์ฌ์ 'Give a f*'์ ์ฝ์นญ ์ ๋๋ค. ์ฑ๊ฒฉ ๋ง์ฐฐ์ ํ์ ๋ช ๋ฒ์ด๋ฉด ํ๋ฆฐ๋ค. ์ฐ๋ฆฌ๋ high agency ยท high performance ยท high ownership๋ง ๋ณธ๋ค."
๋จ๊ธฐ์ ์ผ๋ก๋ YES, ์ฅ๊ธฐ์ ์ผ๋ก๋ ์ง์ ํ์ฐ ๋ฌธ์ . SF์ ๋ชฐ๋ฆฐ "์์ด์ ํธ ๋ฐฐํฌยทํ๊ฐ ๋ ธํ์ฐ"๊ฐ ์ ์ฐ์ ์ ํผ์ง๋ ๋ฐ ~10๋ ๊ฑธ๋ฆด ๊ฒ์ด๋ค. ๊ทธ๋๊น์ง๋ PalantirยทMSFT์ ์๋น์คํ ํ์ฅ์ด ํฉ๋ฆฌ์ ์ ํ.
Matt(Factory)์ ๋ฐ๋ฐ โ "์๋น์ค๋ crap product์ ๋ณ๋ช ์ผ ๋ฟ" โ ์ ๋ํด Oswald๋ "์ง์ ํ์ฐ ๋ฌธ์ ๋ก ๋ด์ผ ํ๋ค. ์ง๊ธ talent pool์ด ๋ถ์กฑํ ๊ฒ ๋ณธ์ง. ๊ฒฐ๊ตญ ์ํํธ์จ์ด ์์ง๋์ด๋ง์ฒ๋ผ ์ผ๋ฐ ์ง๋ฌด๊ฐ ๋ ๊ฒ."
"Mercor์์ ์ดํ์ ๋๋ถ๋ถ ์ฐฝ์ ์ผ๋ก์ ์ดํ์ด๋ค. ๋ค๋ฅธ ํ์ฌ๋ก ๊ฐ๋ ๊ฒ๋ณด๋ค ํจ์ฌ ๋ซ๋ค. FDE๋ ๊ทธ๋ฐ profile์ ์ธ์ฌ๋ฅผ ํค์ฐ๋ ์๋ฆฌ." โ ์ดํ๋ฅ ์ ๊ด๋ฆฌํ๊ธฐ ํ๋ค์ง๋ง ๊ฐ์ธ์ ์ผ๋ก ์ง์งํ๋ค๋ ์คํ ์ค.
๊ฐ์ฅ ๋น ๋ฅด๊ฒ ์ฑ์ฅํ๋ ๋ฐ์ดํฐ ํ์ = RL Environments. ์ฑ์ ๊ณ ์ถฉ์ค๋ ์๋ฎฌ๋ ์ด์ + ๋ฆฌ์น ์คํํธ ์คํ ์ดํธ(์๋ฐฑ~์์ฒ ํ์ผ) + ํ์คํฌ. ์: Salesforce ์ฌ์ฉ๋ฒ์ ํ์ต์ํค๋ ค๋ฉด Salesforce์ ๊ณ ์ถฉ์ค๋ mock์ด ํ์.
๋ฐ์ดํฐ ์งํ ์ถ: SFT โ Preference Ranking โ Rubric-based โ RL Environments. ์ด์ ํ์ตยทํ๊ฐ๋๋ ๋ฐ์ดํฐ๊ฐ ์ค์ ๋ฐฐํฌ ํ๊ฒฝ๊ณผ ํจ์ฌ ๊ฐ๊น์์ง๋ค.
๊ด๋ฆฌ ์๋น์คํ ๋ฐ์ดํฐ ํ๋ก์ ํธ์ ๋ณธ์ง์ ์ด๋ ค์: (1) ์ฃ์ง์ผ์ด์ค ์ ๋ ฌ โ ๊ณ ๊ฐยท์ ๋ฌธ๊ฐ ์ฌ์ด ์ด๊ณ ์ ์ผ๋ผ์ธ๋จผํธ ํ์. (2) ํธ์ง์ฆ์ QA โ "every data point is perfect." (3) ๋ฐ์ดํฐ ํ์ ์ด ๊ณ์ ์งํ โ ๋งค๋ฒ ์ ์นดํ ๊ณ ๋ฆฌ๋ฅผ ์ธํ ํด์ผ ํจ.
๊ฒฝ์ ์งํ์๋ "VC ๋์ ํ์ ์ฐฝ์ ์๊ฐ ์ง์ ๋ผ๋ฒจ๋งํ๋ ์คํํธ์ "๋ค์ด ๋์น๋ค. ๋ฉ ์ ์ฅ์์ mispriced ๋ฌด๋ฃ ๋ฆฌ์์ค์ง๋ง ์ค์ผ์ผ ๋ถ๊ฐ. 10x ํ๋ก์ ํธ๋ก ๋๋ฆฌ๋ ์๊ฐ ๋ฌด๋์ง๋ค โ ์ด๊ฒ Mercor์ ๋ฐฉ์ด์ .
AI ์์ฑ ์ฝ๋ ๊ธ์ฆ โ ์ทจ์ฝ์ ํญ์ฆ โ ์์ ํญ๋ฐ. ์ฌ์ด๋ฒ๋ "AlphaGoํ uncapped ๋ฆฌ์๋ ๊ฒ์" โ ๊ณต๊ฒฉยท๋ฐฉ์ด์ ๋ฌดํ ์บฃ์ค๋ง์ฐ์ค. "์ถฉ์กฑ์ฑ(sufficiency)" ํ๋ ์์ด ์ ํตํ๋ ์นดํ ๊ณ ๋ฆฌ.
"CRM ์ ๋ฐ์ดํธ ๊ฐ์ 'ํ ๋ฒ ํ๋ฉด ๋'์ธ sufficiency ์ํฌํ๋ก์ฐ์ ๋ฌ๋ฆฌ, ์ฌ์ด๋ฒ๋ ๋ชฉํ์ ์ด ํญ์ ์์ง์ธ๋ค. ๊ทธ๋์ ์ฐ๋ฆฌ ๊ด์ ์์ ๊ฒ์ ๊ฐ์ ๋ฐ์ดํฐ ํ์ . '90% ์ปค๋ฒ'๊ฐ ์ ๋ ์ ์ค๋ ์นดํ ๊ณ ๋ฆฌ."
์ค๋ ์๋ฌด๋ ํฌ๊ฒ ์๊ธฐ ์ ํ์ง๋ง Oswald๊ฐ ๊ฐ์ฅ ํฅ๋ถํด ์๋ ๊ฒ = ๋ก๋ณดํฑ์ค ๋ฐ์ดํฐ. Mercor๋ ์ค๋ฌผยท๋ฌผ๋ฆฌ ๋ฐ์ดํฐ ์์ง ์ญ๋์ ํ์ฅ ์ค์ด๋ค.
์์จ์ฃผํ๊ณผ ์ ์ฌํ ๊ถค์ ์์ โ "ChatGPT ์๊ฐ"๋ณด๋ค๋ Waymo/Cruiseํ ์ ์ง์ ํ์ฐ. Harry์ ํ์๋ก โ "๋ก๋ด์ด 15๋ถ์ ๋ฌผ ํ ์ ๊บผ๋ด๊ณ , ์๊ณ ๋ณด๋ Brandon์ด ์๋ฐฉ์์ ์กฐ์ข ํ๊ณ ์๋๋ผ" โ ์ ๋ํด Oswald๋ "10๋ ์ ํฌ๋ฃจ์ฆ๋ ์ฌ๋์ด ํ๊ณ ์์๋ค. ์ง๊ธ ๋๋ Uber๋ณด๋ค Waymo๋ฅผ ๋ ๋ง์ด ํ๋ค"๊ณ ๋ต.
"๊ธฐ์ ์ ๊ฐ๋ฅํ์ง๋ง ๋ฌผ๋ฆฌ ์ค์ผ์ผ๋ง์ด ์ด๋ ต๋ค. ์ํํธ์จ์ด์ฒ๋ผ ๋ฐฐํฌ๋์ง ์๋๋ค. ๊ทธ๋์ ChatGPT ์๊ฐ๋ณด๋ค๋ Waymo/robo-taxi/Cruiseํ ์ ์ง ๋ชจ๋ฉํธ๊ฐ ๋ ๊ฒ์ด๋ค." โ 3๋ + ๊ด์ ์ ๋ฐ์ดํฐ ์ธํ๋ผ ํฌ์๊ฐ ์ ๋ฆฌํ๋ค๋ ํจ์.
ํ๊ธํ๋ฆ ๊ฐ์กฐ โ "๋งค์ถ์ด ์๋๋ค" ๋ ผ์์ ๋ํ ์๋ต:
"์ง์ฆ ์ ๋๋ค. ์ฐ๋ฆฌ๋ ๋งค์ฃผ ์๋ฐฑ๋ง ๋ฌ๋ฌ๊ฐ ๋ ์์ธ๋ค. ๋ค๋ฅธ ํ์ฌ์์ '์ฌ๋ฌด๊ณตํ' ํ๋ ๊ฑธ ๋ง์ด ๋ดค์ง๋ง, ์ฐ๋ฆฌ๋ ๋งค์ฃผ ๋ฑ ํฌ์ ๋์ด ์์ด๊ณ ๋ ์ฐ๋ ์๋๊ฐ ์์๋ฅผ ๋ชป ๋ฐ๋ผ๊ฐ๋ค. Cash flow is insane."
๋งค์ถ ์ง์ค๋ ๋ฆฌ์คํฌ: ํ๋ก ํฐ์ด ๋ฉ 3์ฌ์ ๋งค์ถ ํธ์ค. ๋์ ์ ๋ต โ ๋ค์ด๋ง์ผ ํ์ฅ: self-serve ํ๋ก์ ํธ + AI project manager. "๋ฉ์ฉ white-glove ์๋น์ค๋ ์ด๊ณ ๋น์ฉ. ์ด๊ฑธ ์๋ํํด์ ์ค์ ์ํฐ๋ human data ํ๋ก์ ํธ๋ฅผ ๋๋ฆด ์ ์๊ฒ ๋ง๋๋ ๊ฒ ๋ฐฉํฅ."
๋ง์ง ๋ ผ๋ฆฌ: ์๋ QC ยท ํฉ์ฑ๋ฐ์ดํฐ๋ก ๋ธ๋ฆฌ๋ฒ๋ฆฌ ๊ฐ์ , ํ๋ก์ ํธ๋ณ๋ก ๋ง์ง์ ์ฌํ๊ฒฐ์ . ์ต๊ทผ์ ์ ๋ฌธ๊ฐ ์ธ๊ฑด๋น๋งํผ ํฉ์ฑ๋ฐ์ดํฐยท์๋QC์ฉ LLM ์ง์ถ๋ ํฐ ๋น์ค.
Supply-side ์ค์ผ์ผ ๋น๊ฒฐ 3๊ฐ์ง: (1) ์ ๋ฌธ๊ฐ ๊ฒฝํ(์ ์ยทํฌ๋ช ์ง๊ธ) โ ๋ฆฌํผ๋ด ํ๋ก๊ทธ๋จ ๊ฐํ (2) ์ธ๊ณ ๊ฐ์ง spiky demand๋ฅผ ์ฑ์์ฃผ๋ sourcing team (3) ํ๋ก์ ํธ ์ปค๋ฎค๋์ผ์ด์ ํ์ง.
"์ฐ๋ฆฌ๋ ํ ํฌ ์ธ์์ด๋ธ๋ ์๋น์ค ํ์ฌ๋ค. Eval๊ณผ ํ์ต ๋ฐ์ดํฐ๋ ์ง๊ธ ๋ชจ๋ธ ์ฑ๋ฅ์ 1์ฐจ ๋ณ๋ชฉ์ด๋ค. ๋ชจ๋ ์ํฐํ๋ผ์ด์ฆ๊ฐ ์์ฒด ํนํ ๋ชจ๋ธ์ ์ํ๊ณ , Eval์ PRD ์ญํ ๊ณผ ์ต์ ํ ๋ชฉํ๋ฅผ ๋์์ ํ๋ค. ๋ ๋์ ๋ชจ๋ธ์ด ๊ฒฝ์ ์ ๊ฐ์น ์๋ ํ, Evalยทํ์ต ์ธํธ ์์๋ ์กด์ฌํ๋ค."
3๋ ํ ์ ๋งค์ถ์ ์์: ๋ก๋ณดํฑ์คยท๋ฌผ๋ฆฌ ๋ฐ์ดํฐ. "GenAI ๋๋น, ์์จ์ฃผํ ๋๋น ๋ก๋ด ๋ฐ์ดํฐ ์์ฅ์ nascent. ์ด๊ฒ ํฌ๊ฒ ์ฑ์ฅํ ๊ฒ." Mercor๋ ์ฌ๊ธฐ์ supply(์ ๋ฌธ๊ฐยทoff-the-shelf ๋ฐ์ดํฐ ์ฌํ๋งค)๋ฅผ ๋ฏธ๋ฆฌ ์๋ ์ ๋ต.
โข "์ฐ๋ฆฌ๋ ๋งค์ฃผ ์๋ฐฑ๋ง ๋ฌ๋ฌ๊ฐ ๋ ์์ด๊ณ , ๋ ์ฐ๋ ์๋๊ฐ ์์๋ฅผ ๋ชป ๋ฐ๋ผ๊ฐ๋ค."
โข "์คํ ๋ชจ๋ธ์ ๋ฐ๋ฅ์ ์ฌ๋ฆด ๋ฟ. ๋ฐ์ดํฐ๋ ํ๋ก ํฐ์ด์์ ๊ฐ์ฅ ๊ฐ์ง๋ค."
โข "์ํฐํ๋ผ์ด์ฆ ์ํฌํ๋ก์ฐ์ 90%๊ฐ ์ปค๋ฒ๋๋ค๋ ์ฃผ์ฅ์ ์ ์ฌ์์๋ฅผ ๋์น ๊ณ์ฐ์ด๋ค."
โข "AI ์๋ PM์ ์ ์ผํ ๋ฌด๊ธฐ๋ ํ๋จ๋ ฅ๊ณผ ๋น์ฆ๋์ค ์ํฉํธ๋ค. ์คํฌ ์ด์๋ ์ฌ๋ผ์ก๋ค."
โข "์ฝ์นญํ ์ ์๋ ์ ์ผํ ๊ฒ์ 'give a f*'์ด๋ค."