Loading...

AI 뉴스

ChatGPT 취약점으로 프롬프트 공격을 통한 데이터 도용 가능

페이지 정보

작성자 xtalfi
작성일 2025.11.06 14:13
1,536 조회
0 추천
0 비추천

본문

f43ee9a7735c9322763d602776200742_1762406026_7749.jpg
 

(퍼플렉시티가 정리한 기사)


Tenable의 사이버 보안 연구원들은 OpenAI ChatGPT에서 7개의 치명적인 취약점을 공개했으며, 이를 통해 공격자들이 정교한 프롬프트 주입 공격을 통해 사용자의 개인 정보를 탈취할 수 있어, 수억 명의 일일 사용자들이 자신도 모르는 사이에 데이터 도난에 노출될 가능성이 있습니다.


제로클릭 공격이 ChatGPT 사용자를 표적으로 삼다

GPT-4o와 새로 출시된 GPT-5 모델 모두에 영향을 미치는 이러한 취약점은 악의적인 행위자가 간접 프롬프트 주입 기술을 통해 ChatGPT에 간단한 질문을 하는 것 외에 사용자의 어떠한 상호작용도 필요 없이 채팅 기록, 개인 메모리 및 민감한 사용자 데이터를 유출할 수 있게 합니다.​

월요일에 연구 결과를 발표한 Tenable 연구원 Moshe Bernstein과 Liv Matan에 따르면, "최신 GPT-5 모델에 존재하는 이러한 취약점은 공격자가 단순히 ChatGPT에 질문을 하는 것을 포함한 여러 가능성 있는 피해자 사용 사례를 통해 사용자도 모르는 사이에 사용자를 악용할 수 있게 할 수 있습니다".​

가장 위험한 공격 벡터는 공격자가 Bing이나 OpenAI의 SearchGPT 크롤러와 같은 검색 엔진에 색인되는 악성 웹사이트를 만드는 "제로 클릭" 취약점과 관련이 있습니다. 사용자가 검색을 유발하는 무해한 질문을 할 때, ChatGPT는 이러한 손상된 사이트에서 숨겨진 악성 명령어를 무의식적으로 검색하고 실행합니다.​


메모리 포이즈닝은 지속적인 공격을 가능하게 한다

연구 결과에 따르면 공격자들은 ChatGPT의 메모리 기능을 악용하여 여러 대화와 세션에 걸쳐 지속되는 데이터 도용을 생성할 수 있습니다. "메모리 주입"이라는 기법을 통해 악의적인 프롬프트가 ChatGPT에게 거짓 정보를 기억하도록 하거나 향후 상호작용에서 지속적으로 개인 데이터를 유출하도록 지시할 수 있습니다.​

다른 공격 경로로는 사용자가 ChatGPT에게 기사 요약을 요청할 때 실행되는 악의적인 명령을 블로그 댓글 섹션에 숨기는 방법과, "chatgpt.com/?q={프롬프트}" 형식의 조작된 URL을 통해 악의적인 쿼리를 자동으로 실행하는 원클릭 취약점을 악용하는 방법이 있습니다.​

연구자들은 또한 ChatGPT의 신뢰할 수 있는 도메인 화이트리스트를 악용하는 보안 메커니즘 우회 방법을 발견했으며, 이를 통해 공격자들이 Bing 추적 링크를 사용하여 악의적인 URL을 위장함으로써 OpenAI의 url_safe 보호 시스템을 우회할 수 있습니다.​


OpenAI, 부분적인 수정 조치로 대응

OpenAI는 Tenable에 따르면 기술 연구 권고(TRA-2025-22, TRA-2025-11, TRA-2025-06)를 통해 보고된 취약점 중 일부를 해결했습니다. 그러나 연구원들은 여러 개념 증명 공격이 GPT-5에 대해 여전히 효과적임을 확인했으며, 이는 대규모 언어 모델에서 프롬프트 인젝션의 지속적인 과제를 강조합니다.​

"프롬프트 인젝션은 LLM이 작동하는 방식에서 알려진 문제이며, 안타깝게도 가까운 미래에 체계적으로 수정되지 않을 것입니다"라고 Tenable 연구원들은 경고했습니다. 이러한 발견은 OpenAI가 GPT-5의 보안 태세에 대한 지속적인 조사에 직면하고 있는 가운데 나온 것으로, 별도의 연구에서는 이 모델이 엔터프라이즈 테스트에서 낮은 보안 점수를 받았다고 보여줍니다.​

이러한 취약점은 기업들이 ChatGPT 및 유사한 도구를 비즈니스 워크플로우에 점점 더 통합함에 따라 AI 에이전트 보안에 대한 광범위한 우려를 강조하며, 잠재적으로 민감한 기업 데이터를 유사한 공격 벡터에 노출시킬 수 있습니다.

댓글 0
전체 1,366 / 63 페이지
RobinhoodCEO블라드테네브가공동창업한인공지능스타트업Harmonic이월요일14억5천만달러기업가치로시리즈C펀딩에서1억2천만달러를유치하며,아직상용제품을출시하지않았음에도불구하고유니콘지위를달성했습니다.이번라운드는RibbitCapital이주도했으며,SequoiaCapital,KleinerPerkins,IndexVentures,그리고로렌파월잡스가설립한투자회사인신규투자자EmersonCollective가참여했습니다.​이번펀딩은팔로알토에본사를둔이회사가불과14개월만에진행한세번째자금조달로,총투자금은2억9천5백만달러에이릅니다.Harmonic은인공지능의지속적인문제인할루시네이션(AI시스템이그럴듯하지만잘못된정보를생성하는현상)에집중함으로써투자자들의열광적인관심을받고있습니다.​수학을통한AI환각제거Harmonic의주력모델인Aristotle은정확성을보장하기위해형식적수학검증을사용함으로써기존AI시스템과차별화됩니다.확률적언어예측에의존하는대신,Aristotle은Lean4프로그래밍언어로추론을생성하여각단계의정확성을수학적으로검증할수있게합니다.CEOTudorAchim은Reuters와의인터뷰에서"환각현상의제거는시스템이자연어가아닌코드로추론을출력하도록요구하는우리의요구사항에서직접비롯됩니다"라고말했습니다.​7월,Aristotle은국제수학올림피아드에서금메달수준의성과를달성하며6개문제중5개를해결했습니다.이는Google및OpenAI의시스템과어깨를나란히하는벤치마크였습니다.RibbitCapital의GeneralPartner인NickShalek에따르면,"Aristotle이수학적초지능이현실세계에서달성할수있는것을계속해서입증함에따라우리의파트너십을심화하게되어자랑스럽습니다".​안전필수산업타겟팅Harmonic은항공우주,금융,자동차산업을포함하여오류가심각한결과를초래할수있는분야에서자사의기술을상용화하는것을목표로하고있습니다.현재이회사는Aristotle에대한무료API액세스를제공하고있으며,연구자와수학자들이이도구를사용하여복잡한증명을검증하고발견을가속화하고있습니다.Achim은새로운자금의상당부분이점점더발전된모델을훈련하는데필요한컴퓨팅인프라를지원하는데사용될것이라고밝혔습니다.​형식검증은이미의료기기및항공시스템과같은고위험애플리케이션에서표준으로자리잡고있으며,Harmonic의접근방식은신뢰성우려로인해주저해온위험회피분야에서AI도입을촉진할수있습니다.
777 조회
0 추천
2025.11.26 등록
워너뮤직그룹은화요일AI음악스타트업Suno와합의에도달하여,라이선스파트너십을통해플랫폼이AI생성음악을만드는방식을재정의하게될논쟁적인저작권소송을종결했습니다.이번거래에는Suno가워너로부터콘서트플랫폼Songkick을인수하는것도포함되어있으며,이는음악거대기업이일주일도채안되어이룬두번째주요합의입니다.​소송에서협력으로이번합의는Warner,UniversalMusicGroup,그리고SonyMusicEntertainment가2024년6월Suno와경쟁사Udio를상대로제기한5억달러규모의저작권침해소송중Warner의부분을해결합니다.레이블들은두AI회사가허가나보상없이저작권이있는음원으로음악생성모델을훈련시켰다고비난했습니다.​합의에따라Suno는2026년에현재제공되는서비스를대체할새로운라이선스기반AI모델을출시할예정이며,기존서비스는단계적으로중단됩니다.이파트너십은Warner소속아티스트와작곡가들에게옵트인시스템을통해자신들의이름,이미지,목소리,작곡이AI생성음악에사용될수있는지여부에대한완전한통제권을부여합니다.​WarnerCEORobertKyncl은성명에서"Suno와의이획기적인협약은모두에게이익이되는창작커뮤니티의승리입니다"라고말했습니다."Suno가사용자와수익화측면에서빠르게성장하고있는가운데,우리는수익을확대하고새로운팬경험을제공하는모델을구축할이기회를포착했습니다."​이번거래는Warner의11월19일Udio와의합의및Universal의10월같은회사와의합의에이어이루어졌습니다.Sony는두AI스타트업을상대로여전히소송을진행중인유일한메이저레이블로남아있습니다.​플랫폼변화와산업전환2026년부터Suno는오디오다운로드를위해유료계정을요구할예정이며,무료등급사용자들은자신이만든콘텐츠를플랫폼내에서재생하고공유하는것만가능하게됩니다.유료구독자는월별다운로드제한이있으며,추가다운로드를구매할수있는옵션도제공됩니다.​이합의는Suno가MenloVentures가주도한2억5천만달러규모의시리즈C펀딩라운드를발표한지며칠만에이루어진것으로,이번펀딩으로회사가치는24억5천만달러로평가받았습니다.이번라운드에는Nvidia의벤처부서인NVentures등도참여했습니다.​더넓은협의의일환으로,Suno는Warner의라이브음악발견플랫폼인Songkick을미공개금액에인수했습니다.Warner는2017년에Songkick의앱과브랜드를인수했으며,그후LiveNation이해당티켓팅사업을인수했습니다.
767 조회
0 추천
2025.11.26 등록
일리야수츠케버는**SafeSuperintelligenceInc.**의공동창립자이자전OpenAI수석과학자로서,DwarkeshPatel과의인터뷰에서AI개발이단순히사전학습을대규모로확장하던시대(2020-2025)가한계에도달했으며,이제는"연구의시대"에진입했다고주장한다.그는근본적인과제가모델들이인상적인벤치마크성과에도불구하고"사람보다일반화가현저하게더잘되지않는다"는점이라고설명한다.​수츠케버는현재의강화학습접근법이평가벤치마크에편협하게집중해훈련함으로써의도치않게"보상해킹(rewardhacking)"을하고있을수있다고설명한다.이는마치모델을경쟁프로그래밍대회만을위해10,000시간을연습한학생과비교하는것인데,넓은판단력과취향을가진100시간연습한학생과는다르다는비유로설명한다.이것이모델들이테스트에서는뛰어나지만현실세계의기본적인과제(예:같은두버그사이를번갈아처리하는것)에서는어려움을겪는이유가될수있다.​SSI는2024년9월50억달러가치로10억달러를투자받았으며,2025년3월에는매출없이직원이대략20명임에도불구하고300억달러가치에도달했다.이는여러AI회사들이사전학습확장법칙이점차수익성이감소하고,사용가능한고품질훈련데이터가점점부족해지고있다는증거에직면했기때문이다.
771 조회
0 추천
2025.11.26 등록
Anthropic은화요일에현세대AI모델이미국연간노동생산성성장률을1.8%증가시킬수있다고추정하는연구결과를발표했습니다.이는2019년이후평균성장률을사실상두배로높이는수치입니다.이연구는AI안전기업인Anthropic이발표했으며,Claude챗봇과의실제대화10만건을분석하여기술이광범위하게채택되었을때의잠재적경제영향을계산했습니다.​연구에따르면AI는작업완료시간을평균80%단축시키며,의료지원업무에서는최대90%까지시간절감효과가있었습니다.연구결과에따르면,사람들은일반적으로Claude를복잡한작업에사용하며,이러한작업은인간이수행할경우약1.4시간이소요되고노동비용으로는55달러가듭니다.만약AI가10년내에미국경제전반에완전히확산되고노동이전체생산성의60%를차지한다고가정하면,연구진은전반적인총요소생산성(TFP)이연간1.1%증가할것으로전망했습니다.​"이는전반적인총요소생산성이연1.1%증가한다는것을의미합니다."라고연구자AlexTamkin과PeterMcCrory는썼으며,이는AI가전체경제성장에기여하는정도를근사한다고밝혔습니다.이추정치는최근전망중에서도높은편에해당하며,총요소생산성증가는2000년대초반이후연1%미만에머무는경우가많았습니다.​방법론및한계이연구는AI지원이있을때와없을때작업에소요되는시간을추정하기위해Claude자체를사용하는독특한접근방식을채택했습니다.연구자들은기존임금데이터와작업중요도가중치를사용하여이러한시간절감효과를더넓은경제전반에확대적용했습니다.​이연구는몇가지한계를인정하고있습니다.가장주목할만한점은,AI로절약한시간을근로자들이개인활동이아닌추가적인생산노동에모두사용한다고가정하며,AI결과물을검증하는데소요되는시간을고려하지않는다는것입니다.또한이추정치는AI역량이향후10년간현재수준에머물것이라고가정하여,미래의개선가능성을과소평가할수있습니다.​연구자들은"우리의접근방식은사람들이Claude의결과물을완성된상태로다듬기위해수행해야하는추가작업을고려하지않습니다"라고밝혔습니다.이전의무작위대조시험들은일반적으로더작은시간절감효과를발견했으며,여기에는고객서비스직원의14%생산성향상과전문적인글쓰기작업의40%시간단축이포함됩니다.​더넓은맥락이연구결과는MIT의다론아제모글루(DaronAcemoglu)와같은보수적인경제학자들의추정치와대조를이룬다.아제모글루는AI가향후10년간미국의생산성을0.5%만증가시키고GDP는누적으로약1%증가시킬것으로예측했다.아제모글루는AI가현재경제업무의약5%에만적용된다고주장해왔다.​​연방준비제도부의장필립제퍼슨(PhilipJefferson)은11월에생성형AI를채택한근로자의비율이2024년12월30.1%에서2025년중반까지45.9%로증가했다고언급했다.최근미국노동생산성데이터는2025년2분기에2.4%성장을보였으며,이는2019년이후평균1.8%와비교된다.
789 조회
0 추천
2025.11.26 등록
홈으로 전체메뉴 마이메뉴 새글/새댓글
전체 검색
회원가입