ํ˜œํƒ ์ข…๋ฃŒ๊นŒ์ง€ 47H 59M 59S

Fish Audio๊ฐ€ ํ•œ ์‚ด์ด ๋˜์—ˆ์–ด์š” ๐ŸŽ‚

50% ํ• ์ธ ์ „ ์ƒํ’ˆ.

ํ˜œํƒ ๋ฐ›๊ธฐ
2026๋…„ 3์›” 12์ผ๊ธฐ์—…

์šฐ๋ฆฌ๊ฐ€ ๋งํ•˜๋Š” '์˜คํ”ˆ ์†Œ์Šค'์˜ ์˜๋ฏธ์™€ S2์— ์ด๊ฒƒ์ด ์ค‘์š”ํ•œ ์ด์œ 

์šฐ๋ฆฌ๊ฐ€ ๋งํ•˜๋Š” '์˜คํ”ˆ ์†Œ์Šค'์˜ ์˜๋ฏธ์™€ S2์— ์ด๊ฒƒ์ด ์ค‘์š”ํ•œ ์ด์œ 

S2๋ฅผ ์ถœ์‹œํ•œ ์ดํ›„, ๋ฒค์น˜๋งˆํฌ๋‚˜ ์•„ํ‚คํ…์ฒ˜๋ณด๋‹ค ๋” ์ž์ฃผ ๋ฐ›์€ ์งˆ๋ฌธ์€ ๋ฐ”๋กœ ๋ผ์ด์„ ์Šค์— ๊ด€ํ•œ ๊ฒƒ์ด์—ˆ์Šต๋‹ˆ๋‹ค.
"'์˜คํ”ˆ ์†Œ์Šค'์˜ ์˜๋ฏธ๋ฅผ ๋ช…ํ™•ํžˆ ํ•ด์ฃผ์‹ค ์ˆ˜ ์žˆ๋‚˜์š”? ์ƒ์—…์  ์ด์šฉ์ด ๋ถˆ๊ฐ€๋Šฅํ•ด ๋ณด์—ฌ์„œ์š”." ํƒ€๋‹นํ•œ ์งˆ๋ฌธ์ž…๋‹ˆ๋‹ค. ์ด์— ๋Œ€ํ•œ ๋‹ต๋ณ€์„ ๋“œ๋ฆฝ๋‹ˆ๋‹ค.

์šฐ๋ฆฌ๊ฐ€ ๊ณต๊ฐœํ•œ ๊ฒƒ

S2์™€ ํ•จ๊ป˜ ๋ชจ๋ธ์„ ์‹คํ–‰ํ•˜๊ณ , ์—ฐ๊ตฌํ•˜๊ณ , ๊ทธ ์œ„์— ๊ตฌ์ถ•ํ•˜๋Š” ๋ฐ ํ•„์š”ํ•œ ๋ชจ๋“  ๊ตฌ์„ฑ ์š”์†Œ๋ฅผ ๊ณต๊ฐœํ–ˆ์Šต๋‹ˆ๋‹ค.

  • ๋ชจ๋ธ ๊ฐ€์ค‘์น˜(Model weights): 40์–ต ํŒŒ๋ผ๋ฏธํ„ฐ์˜ ์ „์ฒด Dual-AR ๋ชจ๋ธ
  • ๋ฏธ์„ธ ์กฐ์ • ์ฝ”๋“œ(Fine-tuning code): ์ž์ฒด ์ธํ”„๋ผ์—์„œ ๊ณ ์œ ํ•œ ๋ฐ์ดํ„ฐ๋กœ ํ•™์Šต ๊ฐ€๋Šฅ
  • ํ”„๋กœ๋•์…˜ ์ถ”๋ก  ์—”์ง„(Production inference engine): ์‹ค์ œ ์„œ๋น„์Šค์™€ ๋™์ผํ•œ ์Šคํƒ์ธ SGLang-Omni ์ œ๊ณต
  • ์ „์ฒด ๊ธฐ์ˆ  ๋ณด๊ณ ์„œ(Full technical report): ์•„ํ‚คํ…์ฒ˜ ์ƒ์„ธ ์ •๋ณด, ํ•™์Šต ๋ ˆ์‹œํ”ผ, ๋ฒค์น˜๋งˆํฌ ๋ฐฉ๋ฒ•๋ก  ์ง์ ‘ ๋‹ค์šด๋กœ๋“œํ•˜๊ณ  ๋กœ์ปฌ์—์„œ ์‹คํ–‰ํ•˜๋ฉฐ ๋ฏธ์„ธ ์กฐ์ •ํ•ด ๋ณด์„ธ์š”. ๋ชจ๋“  ๋ ˆ์ด์–ด๋ฅผ ์ ๊ฒ€ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ํ•„์š”ํ•œ ๋ชจ๋“  ๊ฒƒ์ด ์ค€๋น„๋˜์–ด ์žˆ์Šต๋‹ˆ๋‹ค.

๋ผ์ด์„ ์Šค ๊ทœ์ •

S2๋Š” Fish Audio Research License ํ•˜์— ๊ณต๊ฐœ๋˜์—ˆ์Šต๋‹ˆ๋‹ค.

  • ์—ฐ๊ตฌ ๋ฐ ๋น„์ƒ์—…์  ์ด์šฉ: ์™„์ „ ๋ฌด๋ฃŒ์ด๋ฉฐ ์ œํ•œ์ด ์—†์Šต๋‹ˆ๋‹ค.
  • ์ƒ์—…์  ์ด์šฉ: Fish Audio๋กœ๋ถ€ํ„ฐ ๋ณ„๋„์˜ ๋ผ์ด์„ ์Šค ์ทจ๋“์ด ํ•„์š”ํ•ฉ๋‹ˆ๋‹ค. ์ˆจ๊ฒจ์ง„ ์กฐํ•ญ์ด๋‚˜ ์†Œ๊ธ‰ ์ ์šฉ๋˜๋Š” ์ œํ•œ ์‚ฌํ•ญ์€ ์—†์Šต๋‹ˆ๋‹ค.

์˜คํ”ˆ ์†Œ์Šค vs ์˜คํ”ˆ ๊ฐ€์ค‘์น˜: S2์˜ ์œ„์น˜

์ด ์ ์— ๋Œ€ํ•ด ๋ช…ํ™•ํžˆ ๋ง์”€๋“œ๋ฆฌ๊ณ ์ž ํ•ฉ๋‹ˆ๋‹ค. S2๋Š” OSI ์ •์˜์— ๋”ฐ๋ฅธ ์˜คํ”ˆ ์†Œ์Šค๊ฐ€ ์•„๋‹ˆ๋ผ, '์˜คํ”ˆ ๊ฐ€์ค‘์น˜(Open weights)' ๋ชจ๋ธ์ž…๋‹ˆ๋‹ค.
์˜ค๋Š˜๋‚  AI ์—…๊ณ„์—์„œ '์˜คํ”ˆ ์†Œ์Šค'๋ผ๋Š” ์šฉ์–ด๋Š” ๊ด‘๋ฒ”์œ„ํ•œ ๊ณต๊ฐœ ๋ชจ๋ธ์„ ํฌ๊ด„ํ•ฉ๋‹ˆ๋‹ค. ๋ชจ๋“  ์กฐ์ง์€ ์ปค๋ฎค๋‹ˆํ‹ฐ์˜ ์ ‘๊ทผ์„ฑ๊ณผ ๋น„์ฆˆ๋‹ˆ์Šค์˜ ์ง€์† ๊ฐ€๋Šฅ์„ฑ ์‚ฌ์ด์—์„œ ๊ฐ๊ธฐ ๋‹ค๋ฅธ ์ ˆ์ถฉ์•ˆ์„ ์„ ํƒํ•ฉ๋‹ˆ๋‹ค. ์ €ํฌ๋Š” ๊ฐ€์น˜ ์žˆ๋Š” ๋„๊ตฌ๋ฅผ ๊ณต์œ ํ•˜๋ฉด์„œ๋„ ์—ฐ๊ตฌ ๊ฐœ๋ฐœ(R&D) ์ž๊ธˆ์„ ๊ณ„์† ํ™•๋ณดํ•˜๊ธฐ ์œ„ํ•ด ํ˜„์žฌ์˜ ๋ผ์ด์„ ์Šค ๋ชจ๋ธ์„ ์„ ํƒํ–ˆ์Šต๋‹ˆ๋‹ค.
๋ช…์นญ์— ๋Œ€ํ•ด ๋…ผ์Ÿํ•˜๊ธฐ๋ณด๋‹ค, ์ €ํฌ๊ฐ€ ์ œ๊ณตํ•˜๋Š” ๊ฒƒ์ด ์ •ํ™•ํžˆ ๋ฌด์—‡์ธ์ง€ ํˆฌ๋ช…ํ•˜๊ฒŒ ๊ณต๊ฐœํ•˜๊ณ ์ž ํ•ฉ๋‹ˆ๋‹ค. ์ €ํฌ์˜ ์ ‘๊ทผ ๋ฐฉ์‹์„ ๋ช…ํ™•ํžˆ ํ•˜๊ธฐ ์œ„ํ•ด, S2์˜ ๊ณต๊ฐœ ๋ฒ”์œ„๋ฅผ ํ•ด๋‹น ๋ถ„์•ผ์˜ ๋‹ค๋ฅธ ์ฃผ์š” ๋ชจ๋ธ๋“ค๊ณผ ๋น„๊ตํ•ด ๋ณด์•˜์Šต๋‹ˆ๋‹ค.

๊ณต๊ฐœ๋œ ๊ตฌ์„ฑ ์š”์†ŒS2Llama 4DeepSeek R1Mistral Large 3GPT-OSS
๋ชจ๋ธ ๊ฐ€์ค‘์น˜โœ…โœ…โœ…โœ…โœ…
๋ฏธ์„ธ ์กฐ์ • ์ฝ”๋“œโœ…โœ…โœ…โœ…โŒ
์ถ”๋ก  ์—”์ง„โœ…โŒโŒโŒโŒ
๊ธฐ์ˆ  ๋ณด๊ณ ์„œโœ…โœ…โœ…โœ…โŒ
๋ฌด๋ฃŒ ์ƒ์—…์  ์ด์šฉโŒโœ… (< 700M MAU)โœ… (MIT)โœ… (Apache 2.0)โœ…
ํ•™์Šต ๋ฐ์ดํ„ฐโŒโŒโŒโŒโŒ

์ €ํฌ๋Š” ์ด๊ฒƒ์ด TTS ๋ถ„์•ผ์—์„œ ๊ฐ€์žฅ ์™„์„ฑ๋„ ๋†’์€ ๊ณต๊ฐœ ์ค‘ ํ•˜๋‚˜๋ผ๊ณ  ๋ฏฟ์Šต๋‹ˆ๋‹ค. ๊ฐ€์ค‘์น˜์™€ ๋…ผ๋ฌธ์„ ๋„˜์–ด ๋ฏธ์„ธ ์กฐ์ • ์ฝ”๋“œ์™€ ํ”„๋กœ๋•์…˜ ์ถ”๋ก  ์—”์ง„๊นŒ์ง€ ๊ณต๊ฐœํ•˜๋Š” ๊ฒƒ์€ ์–ด๋–ค ๊ทœ๋ชจ์—์„œ๋“  ํ”์น˜ ์•Š์€ ์ผ์ž…๋‹ˆ๋‹ค.

์ด ๋ผ์ด์„ ์Šค๋ฅผ ์„ ํƒํ•œ ์ด์œ 

์ตœ์ฒจ๋‹จ TTS ๋ชจ๋ธ์„ ๊ตฌ์ถ•ํ•˜๊ณ  ์œ ์ง€ํ•˜๋ ค๋ฉด ํ•™์Šต, ๋ฐ์ดํ„ฐ ์ธํ”„๋ผ ๋ฐ ์—ฐ๊ตฌ์— ๋Œ€ํ•œ ์ง€์†์ ์ธ ํˆฌ์ž๊ฐ€ ํ•„์š”ํ•ฉ๋‹ˆ๋‹ค. ์„ธ๊ณ„ ์ตœ๋Œ€์˜ ๊ธฐ์ˆ  ๊ธฐ์—…๋“ค๊ณผ ๊ฒฝ์Ÿํ•˜๋Š” ์Šคํƒ€ํŠธ์—…์œผ๋กœ์„œ, ์ €ํฌ๋Š” ๊ฐœ๋ฐฉ์„ฑ๊ณผ ์ง€์†์ ์ธ ๊ฐœ๋ฐœ ๋Šฅ๋ ฅ ์‚ฌ์ด์—์„œ ๊ท ํ˜•์„ ์žก์•„์•ผ ํ•ฉ๋‹ˆ๋‹ค.
์ƒ์—…์  ๋ผ์ด์„ ์‹ฑ์€ ์ €ํฌ๊ฐ€ ์ง€์†์ ์œผ๋กœ ๊ฐœ๋ฐœ์„ ์ด์–ด๊ฐˆ ์ˆ˜ ์žˆ๋Š” ์žฌ์›์ด ๋ฉ๋‹ˆ๋‹ค. ์ด๋ฅผ ํ†ตํ•ด ๋‹ค์Œ ๋ชจ๋ธ์— ํˆฌ์žํ•˜๊ณ , ์ธํ”„๋ผ๋ฅผ ์œ ์ง€ํ•˜๋ฉฐ, ํŒ€์„ ์„ฑ์žฅ์‹œํ‚ฌ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ๊ธฐ์—… ๊ณ ๊ฐ์—๊ฒŒ ์ด๋Š” ์ง€์›๋˜์ง€ ์•Š๋Š” ์ปค๋ฎค๋‹ˆํ‹ฐ ์—…๋ฐ์ดํŠธ์— ์˜์กดํ•˜๋Š” ๋Œ€์‹ , ์ „๋‹ด ํŒ€์ด ์ง€์›ํ•˜๋Š” ์•ˆ์ •์ ์ด๊ณ  ์ฆ‰์‹œ ํ”„๋กœ๋•์…˜์— ํˆฌ์ž… ๊ฐ€๋Šฅํ•œ TTS ๋ชจ๋ธ์„ ์–ป๊ฒŒ ๋จ์„ ์˜๋ฏธํ•ฉ๋‹ˆ๋‹ค.
์ €ํฌ๋Š” ์˜๋„์ ์ธ ์„ ํƒ์„ ๋‚ด๋ ธ์Šต๋‹ˆ๋‹ค. ์ปค๋ฎค๋‹ˆํ‹ฐ์™€ ๊ฐœ๋ฐœ์ž๊ฐ€ S2๋ฅผ ๋ฌด๋ฃŒ๋กœ ์‚ฌ์šฉ, ์—ฐ๊ตฌ ๋ฐ ๊ตฌ์ถ•ํ•˜๋Š” ๋ฐ ํ•„์š”ํ•œ ๋ชจ๋“  ๊ฒƒ์„ ๊ณต๊ฐœํ•˜๋˜, ์ด๋ฅผ ํ”„๋กœ๋•์…˜์— ๋ฐฐํฌํ•˜๋ ค๋Š” ๊ธฐ์—…์—๋Š” ์ƒ์—…์  ๋ผ์ด์„ ์Šค๋ฅผ ์ œ๊ณตํ•˜๋Š” ๊ฒƒ์ž…๋‹ˆ๋‹ค. ์ด๊ฒƒ์ด ํ˜„์žฌ ์ €ํฌ์˜ ์ƒํ™ฉ์—์„œ ์ ์ ˆํ•œ ๊ท ํ˜•์ด๋ผ๊ณ  ์ƒ๊ฐํ•ฉ๋‹ˆ๋‹ค.

๊ธฐ์—… ๊ณ ๊ฐ์—๊ฒŒ ๊ฐ–๋Š” ์˜๋ฏธ

์ƒ์—…์  ์ด์šฉ์„ ์œ„ํ•ด S2๋ฅผ ๊ฒ€ํ†  ์ค‘์ด์‹œ๋ผ๋ฉด ๋‹ค์Œ๊ณผ ๊ฐ™์€ ๋‹จ๊ณ„๋ฅผ ๊ฑฐ์น˜๊ฒŒ ๋ฉ๋‹ˆ๋‹ค:
์ž์œ ๋กญ๊ฒŒ ํ‰๊ฐ€ํ•˜์„ธ์š”. ๊ฐ€์ค‘์น˜๋ฅผ ๋‹ค์šด๋กœ๋“œํ•˜์—ฌ ์ž์ฒด ์ธํ”„๋ผ์—์„œ ์‹คํ–‰ํ•˜๊ณ  ์‚ฌ์šฉ ์‚ฌ๋ก€์— ๋งž์ถฐ ๋ฒค์น˜๋งˆํฌ๋ฅผ ์ˆ˜ํ–‰ํ•˜์„ธ์š”. ์—ฐ๊ตฌ์šฉ ๋ผ์ด์„ ์Šค๋Š” ์ด ๋ชจ๋“  ๊ณผ์ •์„ ๋น„์šฉ ์—†์ด ๋ณด์žฅํ•ฉ๋‹ˆ๋‹ค.
์ƒ์—…์  ๋ผ์ด์„ ์Šค ์ ˆ์ฐจ๋Š” ๊ฐ„๋‹จํ•ฉ๋‹ˆ๋‹ค. ์ œํ’ˆ์„ ์ถœ์‹œํ•  ์ค€๋น„๊ฐ€ ๋˜์—ˆ๋‹ค๋ฉด business@fish.audio๋กœ ๋ฌธ์˜ํ•ด ์ฃผ์„ธ์š”. ์ €ํฌ๋Š” ๊ธฐ์—…์ด ํ™•์‹ ์„ ๊ฐ€์ง€๊ณ  ๊ฐœ๋ฐœํ•  ์ˆ˜ ์žˆ๋„๋ก ์œ ์—ฐ์„ฑ๊ณผ ๋ฒ•์  ๋ช…ํ™•์„ฑ์„ ์ œ๊ณตํ•˜๋Š” ์ƒ์—…์  ๋ผ์ด์„ ์Šค๋ฅผ ๊ฐ–์ถ”๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. API ์•ก์„ธ์Šค, ์˜จํ”„๋ ˆ๋ฏธ์Šค ๋ฐฐํฌ, ํ™”์ดํŠธ ๋ ˆ์ด๋ธ” ํ†ตํ•ฉ ๋˜๋Š” ๋งž์ถคํ˜• ๊ณ„์•ฝ ๋“ฑ ๋ฌด์—‡์ด ํ•„์š”ํ•˜์‹œ๋“  ์ตœ์ ์˜ ๊ตฌ์กฐ๋ฅผ ์ฐพ๊ธฐ ์œ„ํ•ด ํ˜‘๋ ฅํ•˜๊ฒ ์Šต๋‹ˆ๋‹ค.
์™„๋ฒฝํ•œ ๊ธฐ์ˆ ์  ์ œ์–ด๊ถŒ์„ ๊ฐ€์ง‘๋‹ˆ๋‹ค. ๊ฐ€์ค‘์น˜์™€ ํ•จ๊ป˜ ๋ฏธ์„ธ ์กฐ์ • ์ฝ”๋“œ์™€ ์ถ”๋ก  ์—”์ง„์„ ๊ณต๊ฐœํ–ˆ๊ธฐ ๋•Œ๋ฌธ์—, ๊ธฐ๋ณธ ์Šคํƒ์ด ํˆฌ๋ช…ํ•˜๊ณ  ์ ๊ฒ€ ๊ฐ€๋Šฅํ•˜๋‹ค๋Š” ๊ฒƒ์„ ์•Œ๊ณ  ๋”ฅ ์ธํ…Œ๊ทธ๋ ˆ์ด์…˜์„ ๊ตฌ์ถ•ํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ์ƒ์—…์  ๋ผ์ด์„ ์Šค๋Š” ์ด๋ฅผ ํ”„๋กœ๋•์…˜์— ๋ฐฐํฌํ•  ์ˆ˜ ์žˆ๋Š” ๊ถŒํ•œ์„ ๋ถ€์—ฌํ•ฉ๋‹ˆ๋‹ค.

๊ฐ€๋Šฅํ•œ ๊ฒƒ๋“ค์„ ๊ณ„์† ๊ณต๊ฐœํ•˜๋Š” ์ด์œ 

์ €ํฌ๋Š” ์œ ์ง€ ๊ฐ€๋Šฅํ•œ ํ•œ ์ตœ๋Œ€ํ•œ์œผ๋กœ ๊ฐœ๋ฐฉํ•˜๋Š” ๊ฒƒ์„ ์‹ ์กฐ๋กœ ์‚ผ๊ณ  ์žˆ์Šต๋‹ˆ๋‹ค. ๋…์ ํ•  ์ˆ˜๋„ ์žˆ์—ˆ๋˜ ์ „์ฒด ์ถ”๋ก  ์—”์ง„์„ ๊ณต๊ฐœํ•œ ์ด์œ , ์™„์ „ํ•œ ๊ธฐ์ˆ  ๋ณด๊ณ ์„œ๋ฅผ ๋ฐœํ‘œํ•œ ์ด์œ , ๊ทธ๋ฆฌ๊ณ  ๊ฐ€์ค‘์น˜์™€ ํ•จ๊ป˜ ๋ฏธ์„ธ ์กฐ์ • ์ฝ”๋“œ๋ฅผ ์ œ๊ณตํ•˜๋Š” ์ด์œ ๊ฐ€ ๋ฐ”๋กœ ์—ฌ๊ธฐ์— ์žˆ์Šต๋‹ˆ๋‹ค.
๋™์‹œ์— ์ปค๋ฎค๋‹ˆํ‹ฐ๋Š” ์–ธ์ œ๋‚˜ Fish Audio์˜ ํ•ต์‹ฌ์ด์—ˆ์Šต๋‹ˆ๋‹ค. Fish Audio๋Š” ์˜คํ”ˆ ์†Œ์Šค ํ”„๋กœ์ ํŠธ๋กœ ์‹œ์ž‘๋˜์—ˆ์Šต๋‹ˆ๋‹ค. ์ €ํฌ ํ”Œ๋žซํผ์˜ 600๋งŒ ํฌ๋ฆฌ์—์ดํ„ฐ์™€ 200๋งŒ ๊ฐœ ์ด์ƒ์˜ ์Œ์„ฑ ๋ชจ๋ธ์€ ์ €ํฌ๋งŒ์˜ ํž˜์œผ๋กœ ์ด๋ฃจ์–ด์ง„ ๊ฒƒ์ด ์•„๋‹ˆ๋ผ, ๋ฐ”๋กœ ์ด ์ปค๋ฎค๋‹ˆํ‹ฐ ๋•๋ถ„์— ๊ฐ€๋Šฅํ–ˆ์Šต๋‹ˆ๋‹ค. ์ด๊ฒƒ์ด ์ €ํฌ๊ฐ€ ๊ฐ€๋Šฅํ•œ ๋ถ€๋ถ„์„ ๊ณ„์†ํ•ด์„œ ๊ณต๊ฐœํ•˜๋Š” ์ด์œ ์ด๋ฉฐ, ์ €ํฌ๊ฐ€ ์—ฌ๋Ÿฌ๋ถ„ ๊ณ์„ ์ง€ํ‚ค๋Š” ์ด์œ ์ž…๋‹ˆ๋‹ค.


S2 ์ฒดํ—˜ํ•˜๊ธฐ: fish.audio/s2
GitHub: github.com/fishaudio/fish-speech
HuggingFace: huggingface.co/fishaudio/s2-pro
์ƒ์—…์  ๋ผ์ด์„ ์Šค ๋ฌธ์˜: business@fish.audio

Rissa Cao

Rissa CaoX

Rissa is the CEO and co-founder of Fish Audio, pushing breakthroughs in AI voice technology. Find her latest work at @rissa_cao.

Rissa Cao์˜ ๋” ๋งŽ์€ ๊ธ€ ๋ณด๊ธฐ

์‹ค๊ฐ ๋‚˜๋Š” ๋ชฉ์†Œ๋ฆฌ๋ฅผ ๋งŒ๋“ค์–ด๋ณด์„ธ์š”

์˜ค๋Š˜๋ถ€ํ„ฐ ์ตœ๊ณ  ํ’ˆ์งˆ์˜ ์˜ค๋””์˜ค๋ฅผ ์ƒ์„ฑํ•˜์„ธ์š”.

์ด๋ฏธ ๊ณ„์ •์ด ์žˆ์œผ์‹ ๊ฐ€์š”? ๋กœ๊ทธ์ธ