PGR21.com
- PGR21 관련된 질문 및 건의는 [건의 게시판]을 이용바랍니다.
- (2013년 3월 이전) 오래된 질문글은 [이전 질문 게시판]에 있습니다.
통합 규정을 준수해 주십시오. (2015.12.25.)
Date 2025/06/05 17:25:45
Name Scour
Subject [질문] LLM 질문 - ChatGPT는 어디서 돌아가고 있나요
조금 테크니컬한 질문인데요

요새 코어위브 처럼 아예 GPU를 대량 매수해서 GPU 연산 서비스화 및 구독판매하는 모델이 나오고 있는데요.
우리나라엔 AI급 데이터센터가 몇개 안되는 것으로 알고있는데(있긴 있나요?)... 여기서 궁금한게 우리나라에선, 즉 제가 지금 한국에서 ChatGPT를 사용한다고 치면, 여기에 필요한 전산(compute)을 누가 어디서 돌리나요? 제가 입력한 질문이 KT망을 타고 바다를 건너 미국(혹은 그 외 지역)에 있는 마소 AI 데이터센터에 전송이 되고 거기서 ChatGPT가 열심히 굴려서 답변해주면 그 답변이 다시 바다를 건너 한국 KT망에 들어와서 제 폰에 뿌려지는 방식인가요?

이게 맞다면, 그리고 저희가 ChatGPT 답변이 10초 이상 걸려도 크게 신경을 안쓰는 트렌드가 계속된다면, 굳이 한국에 AI 서버를 설치할 필요가 있나요? 저기 뭐 값싼 동남아나 호주 이런데 잔뜩 지어놓고 거기서 끌어와 쓰면 되는건지요?

고견 기다립니다.
감사합니다.

통합규정 1.3 이용안내 인용

"Pgr은 '명문화된 삭제규정'이 반드시 필요하지 않은 분을 환영합니다.
법 없이도 사는 사람, 남에게 상처를 주지 않으면서 같이 이야기 나눌 수 있는 분이면 좋겠습니다."
25/06/05 17:30
수정 아이콘
일단 외국 서버에서 돌아가는 것은 확실합니다. 웹페이지야 바로바로 떠야되니까 한국 서버에 놓지만 말씀하신대로 ai처럼 응답 시간이 중요하지 않은 경우는 굳이 한국 서버에 놓을 필요가 없습니다
격렬하게쉬고싶다
25/06/05 17:33
수정 아이콘
굳이 KT망은 아닐수 있고 (그럴 가능성이 높지만) 마이크로소프트 Azure 서비스의 데이터센터의 NVIDIA GPU 서버에서 돌겠죠.
ChatGPT같은 서비스의 서버를 한국에 두어야 하는 이유는 저도 잘 모르겠습니다. 지금 OpenAI 한국지사도 영업조직일겁니다.
그리고, KT-MS 협력은 또 궤가 다릅니다. GPT-K 뭐 이런 말이 나오는데 한국에 GPU 서버를 두고 돌아갈지 의문이네요.
25/06/05 17:44
수정 아이콘
세크리
25/06/05 17:44
수정 아이콘
현재 서버는 대부분 외국에 있고, 데이터 처리도 다 외국에서 되죠. OpenAI가 한국에 서버를 설치하면 뭐 latency 개선 이외에 딱히 큰 효과는 없겠죠. 다만 국내 기업이 LLM을 국내에 있는 서버로 서비스를 한다면 보안 면에서 국내 기업들이 해당 서비스를 이용할 확률이 크다고 봅니다. 예를 들어 한국 지도 데이터는 국외 반출이 법적으로 제한됩니다. 한국 서버에서 돌아가는 LLM이 생기면 해당 지도 데이터를 통해서 뭔가 서비스를 만들 수 있겠죠.
25/06/05 18:24
수정 아이콘
다른 얘긴데 K-LLM이라고 해봤자 딥식이던 그록이던 기존 아키텍쳐 기반이겠지요?
BlueTypoon
25/06/05 19:55
수정 아이콘
https://platform.openai.com/docs/guides/your-data
여기 참고하면 될 것 같습니다.
연산 서버는 미국, 유럽에 있고 데이터는 더 넓은 지역에 있습니다. 한국에도 있긴한데 특정 기업들의 데이터 보호용으로 알고있어서 그 외의 사람들도 한국 내 데이터센터를 쓰는지는 확인이 필요할 것 같습니다.
BlueTypoon
25/06/05 20:24
수정 아이콘
https://openai.com/index/introducing-data-residency-in-asia/
여기에도 관련 내용이 더 있습니다. 카카오가 언급되어있고 비지니스 제품, 조건이 되는 API 플랫폼이 지역의 데이터 센터를 이용한다고 되어있네요.
larrabee
25/06/05 22:40
수정 아이콘
azure 한국 리전이 있긴합니다만 극히 일부 서비스들만 한국리전을 이용할거고, chatgpt 포함 대부분 해외서버에서 돌아갈겁니다
초콜릿
25/06/06 02:16
수정 아이콘
해외에 있지 않을까 싶습니다. 정확히 ChatGPT 이야기는 아니긴 합니다만... AWS가 제공하는 Bedrock 같은 서비스들 보면 Claude Sonnet 3.5까지는 AWS 서울 리전으로 한정해서 호출할 수 있었는데, Sonnet 3.7 이상부터는 서울 리전만으로는 제공되지 않고 (굳이 아시아권에서 쓰고 싶다면) 아시아-태평양 통합으로만 호출해서 쓸 수 있습니다.
목록 삭게로! 맨위로
번호 제목 이름 날짜 조회
181050 [질문] 엑스박스 발로란트 질문입니다. [1] 바람의 빛412 25/07/03 412
181049 [질문] 아이폰/아이패드 상단바 부분 누르면 스크롤 최상단으로 올라가는 거 끄는 법이 있나요? liten553 25/07/03 553
181048 [질문] 러시아어를 배우려고 하는데 왕초보라서 어떤 책을 봐야 할지 모르겠습니다. 미키맨틀619 25/07/03 619
181047 [질문] 둘중 한명의 선수로 살아볼수 있으면 누가 더 매력적이세요? [13] + 마르키아르1147 25/07/03 1147
181046 [삭제예정] 바르셀로나 vs FC서울 경기 티켓 구하시는분 있을까요? [4] 삭제됨1217 25/07/03 1217
181045 [질문] [사진첨부] 해당 나무의 이름이 뭘까요..? [1] 해버지1095 25/07/03 1095
181044 [질문] 원피스는 만화와 애니가 동시 진행일까요? [6] 회색사과1081 25/07/03 1081
181043 [질문] 위내시경 비수면으로 하면 큰일날까요....? [45] EnergyFlow2271 25/07/03 2271
181042 [질문] 사진보관용 외장하드에 대해질문드립니다. [9] 천우희1988 25/07/03 1988
181041 [질문] 뇌전증(간질) 약은 하루 12시간 간격을 꼭 지켜야하나요? 30분-1시간 정도 약 먹는게 늦어지면 위험한가요? [5] Succession2383 25/07/02 2383
181040 [질문] 정말 오래된 차인데 와이프 출퇴근용으로 타려합니다.이런 저런 질문즘 드립니다 [6] 하이킹베어2494 25/07/02 2494
181039 [질문] 선물용 양주 추천 부탁드립니다. [14] 우엉징아리2400 25/07/02 2400
181038 [질문] PC 견적문의 드립니다. [10] + 종합백과1659 25/07/02 1659
181037 [질문] 옷(브랜드) 관련 질문입니다. [17] AquaMarine1231 25/07/02 1231
181036 [질문] 인터넷 전화기에 블루투스 이어폰을 사용하고 싶습니다. [2] 귀여운호랑이622 25/07/02 622
181034 [질문] 고효율 가전제품 구매 1인당 최대 30만원 환급 [6] 유포늄1811 25/07/02 1811
181033 [질문] 붕괴 스타레일 질문.. [4] 속보860 25/07/02 860
181032 [질문] PC에서 무선으로 쓸 게임패드 추천 부탁드려요! [18] 꽃이나까잡숴1317 25/07/02 1317
181031 [삭제예정] 갑질 관련 기사 제보 질문입니다. [1] 삭제됨2135 25/07/01 2135
181030 [질문] 노래를 찾습니다. [2] JoyB1865 25/07/01 1865
181029 [질문] [연애] 도대체 거절 후 이런 문자를 왜 보내는걸까요? (장문 주의) [32] 쿠쿠다스5870 25/07/01 5870
181028 [질문] 대상포진 후 신경통이 있습니다. 아파요 흑흑 [8] 가이브러시2770 25/07/01 2770
181027 [질문] 세컨카로 캐스퍼 vs 베뉴 [13] 로켓2655 25/07/01 2655
목록 이전 다음
댓글

+ : 최근 1시간내에 달린 댓글
+ : 최근 2시간내에 달린 댓글
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기
회원정보 보기
닫기