12월 5일 (목) 오전 12:33

logo

  • home
  • head
  • itnews
  • product
  • mobile
  • game
  • benchmark
  • analysis
  • blog

Mission: Impossible – The Final Reckoning | Teaser Trailer (2025 Movie) - Tom Cruise
Top Gun 3 is officially in production! 탑건 시리즈의 세 번째 영화 주연 : 톰 크루즈 등

자율주행 자동차 시뮬레이션은 두 가지 난제를 풀어야 합니다. 바로 인공지능(AI) 운전자가 시뮬레이션을 실제같이 인식할 정도로 충분히 세부적이고 사실적인 세상을 만드는 일, 완벽하게 훈련되고 테스트될 필요가 있는 사례 모두를 담을 만큼 충분히 큰 규모의 시뮬레이션을 만드는 일이죠.

이런 난제를 해결하기 위해 NVIDIA 연구원들은 실제 세계 데이터로 직접 시뮬레이션을 구축하는 새로운 AI 기반 툴을 개발했습니다. NVIDIA의 창립자 겸 CEO인 젠슨 황(Jensen Huang)은 GTC 키노트에서 해결책을 선보였습니다.

 

이번 연구에는 지난달 열린 컴퓨터그래픽 컨퍼런스인 SIGGRAPH에서 처음 발표된 수상작들이 포함돼 있습니다.

신경 재구성 엔진(Neural Reconstruction Engine)

신경 재구성 엔진은 여러 AI 네트워크를 사용해 녹화된 비디오 데이터를 시뮬레이션으로 변환시키는 NVIDIA DRIVE Sim 시뮬레이션 플랫폼의 새로운 AI 툴 세트입니다.

이 새로운 파이프라인은 AI를 통해 환경, 3D 애셋, 시나리오 등등 시뮬레이션에 필요한 핵심 구성 요소를 자동으로 추출합니다. 그런 다음 이런 요소들은 데이터 기록의 현실 같은 모습을 갖췄으면서도 완전히 반응적이며 필요에 따라 조작 가능한 시뮬레이션 장면으로 재구성되죠. 이 정도로 세부적이고 다양한 시뮬레이션을 수작업으로 구성하려면 비용과 시간이 많이 들고 확장성이 떨어지게 됩니다.

환경과 애셋

시뮬레이션은 작동하기 위한 환경이 필요한데요. 이 신경 재구성 엔진은 실제 세계에서 얻은 2D 영상 데이터를 DRIVE Sim에 로딩할 수 있는 동적인 3D 디지털 트윈 환경으로 변환시켜주죠.

AI를 이용해 녹화된 주행 데이터로부터 생성된 3D 시뮬레이션 환경

이 DRIVE Sim AI 파이프라인은 다른 3D 애셋을 재구성하기 위해 유사한 프로세스를 따릅니다. 엔지니어는 애셋을 사용해 현재 장면을 재구성하거나 모든 시뮬레이션에서 쓸 수 있는 큰 애셋 라이브러리를 배치할 수 있습니다.

애셋을 수집하는 이런 파이프라인을 사용하는 것이 DRIVE Sim 라이브러리를 확장하고 반드시 실제 세계의 다양성과 분포에 맞게 만드는 데 중요합니다.

실제 세계 데이터에서 애셋을 수집해 3D 객체로 전환하고 다른 장면에서 재사용할 수 있습니다. 여기서 견인차는 왼쪽 장면에서 재구성되어 오른쪽에 표시된 다른 시뮬레이션에 사용되고 있습니다.

시나리오

시나리오는 애셋과 결합된 환경에서 시뮬레이션 중에 발생하는 사건들을 말합니다.

신경 재구성 엔진은 장면에 나오는 행위자에게 AI 기반 행동을 할당하여 원래의 사건들과 함께 제시될 때 실제 주행처럼 정확하게 똑같이 움직이게 합니다. 하지만 행위자들에게는 AI 행동 모델이 있기 때문에, 시뮬레이션 내에서 행위자들은 시청각(AV)이나 다른 장면 요소에 따른 변화에 반응하고 대응할 수 있죠.

이런 시나리오들은 모두 시뮬레이션에서 발생하기 때문에 새로운 상황을 추가하기 위해 조작될 수도 있습니다. 사건의 타이밍과 위치도 변경할 수 있죠. 개발자는 심지어 합성됐거나 실제적으로 완전히 새로운 요소들을 통합해 사건을 더 복잡하게 구현할 수 있습니다. 아래 장면처럼 아이가 공을 쫓는 사건을 첨가하는 경우도 그런 경우입니다.

합성 객체가 실제 시나리오와 혼합될 수 있습니다.

DRIVE Sim으로의 통합

환경, 애셋, 시나리오가 일단 추출된 후에는 DRIVE Sim에서 재조립되어 기록된 장면의 3D 시뮬레이션을 생성하거나 다른 애셋과 혼합되어 완전히 새로운 장면을 생성합니다.

DRIVE Sim은 개발자가 동적이거나 정적인 객체, 차량 경로, 차량 센서의 위치, 방향, 매개 변수를 조정할 수 있는 툴을 제공합니다.

DRIVE Sim의 동일한 장면은 인식 시스템을 훈련시키기 위해 미리 레이블이 지정된 합성 데이터를 생성하는 데에도 사용됩니다. 훈련 데이터에 다양성을 추가하기 위해 재생성된 장면에 무작위화가 적용됩니다. 실제 세상 데이터로 장면을 만들면 시뮬레이션과 실제 세상 간의 차이가 크게 줄어들죠.

재구성된 장면은 합성 애셋으로 증강될 수 있으며 시청각(AV) 인식 시스템을 훈련하기 위한 실측 정보로 새로운 데이터를 생성하는 데 쓰일 수 있습니다.

시뮬레이션 형식을 혼합하고 일치시킬 수 있는 기능은 시청각(AV)을 규모에 맞게 종합적으로 테스트하고 검증하는 데 중요한 강점이 됩니다. 엔지니어는 반응성이 뛰어나고 요구에 정확히 부합하는 세상에서 사건들을 다룰 수 있습니다.

신경 재구성 엔진은 NVIDIA의 연구팀이 작업한 결과물로, 향후 DRIVE Sim 릴리스에 통합될 예정입니다. 이를 통해 개발자는 동일한 클라우드 기반 플랫폼에서 물리 기반 시뮬레이션과 신경 기반 시뮬레이션을 모두 활용할 수 있게 됐습니다.

 

출처 - https://blogs.nvidia.co.kr/2022/09/29/drive-sim-neural-reconstruction-engine/






  1. 조립 컴퓨터에서 소음이 자꾸 나는데 뭐가 문제일까요?

    조립 컴퓨터에서 소음이 자꾸 나는데 뭐가 문제일까요?
    Date2024.10.26
    Read More
  2. 다시 5만전자로... 삼성전자 이대로 무너지나? f. KBS 서영민 기자 [심층인터뷰]

    다시 5만전자로... 삼성전자 이대로 무너지나? f. KBS 서영민 기자 [심층인터뷰]  
    Date2024.10.13
    Read More
  3. [잇섭] 갤럭시 버즈3 프로 QC 불량 이슈? 직접 10개 사서 모두 까봤습니다 ㅋㅋ

    제품은 잘 뽑았는데... 역대 초유의 갤럭시 버즈3 프로 QC 체크 이슈가 터졌습니다. 사실 이게 인터넷에서만 소수에게 발생하는 문제인지, 전반적인 문제인지가 궁금했는데요. 그래서 제가 각 플랫폼별 2개...
    Date2024.07.21
    Read More
  4. [시청역 사고] 자동차 명장 “급발진 가능성 70% 브레이크등 켜졌나 여부? 의미없다“

    [CBS 김현정의 뉴스 쇼] [시청역 사고] 자동차명장 “급발진 가능성 70% 브레이크등 켜졌나 여부? 의미없다“
    Date2024.07.04
    Read More
  5. [KT 국민 해킹 사건 2편] KT는 어쩌다 이런 선택을..?

    [KT 국민 해킹 사건 2편] KT는 어쩌다 이런 선택을..?  
    Date2024.07.04
    Read More
  6. [KT 국민 해킹 사건 1편] 통신사와 웹하드, 그리드를 알아보자

    [KT 국민 해킹 사건 1편] 통신사와 웹하드, 그리드를 알아보자  
    Date2024.07.02
    Read More
  7. [NVIDIA CEO Jensen Huang] GTC March 2024 Keynote

    Watch NVIDIA CEO Jensen Huang’s GTC keynote to catch all the announcements on AI advances that are shaping our future.  
    Date2024.05.31
    Read More
  8. [Microsoft Build 2024] Full Keynote: Satya Nadella

    [세계 1위 기업 마이크로소프트] Satya Nadella Full Keynote at Microsoft Build 2024  
    Date2024.05.31
    Read More
  9. Google Keynote (Google I/O ‘24)

    It’s time to I/O! Tune in to learn the latest news, announcements, and AI updates from Google.  
    Date2024.05.19
    Read More
  10. [All Around AI 1편] AI의 시작과 발전 과정, 미래 전망

    우리 삶을 혁신적으로 바꾸고 있는 인공지능(Artificial Intelligence, AI). AI를 알고, 이해하고 또 활용하고 싶은 이들을 위해 <AAA - All Around AI>에서 AI 기술에 대한 모든 것을 알려드립니다. 1화...
    Date2024.04.29
    Read More
  11. 구글의 차세대 모델: 제미나이 1.5

    순다 피차이(Sundar Pichai), 구글 및 알파벳 CEO가 드리는 말씀 지난 주, 구글은 가장 성능이 뛰어난 모델 제미나이 1.0 울트라를 출시하며 제미나이 어드밴스드를 선보였습니다. 이는 더욱 유용한 ...
    Date2024.02.22
    Read More
  12. 미국에선 s24가 공짜, 제값 내는건 한국인뿐 / 깐깐남in뉴욕 / 비디오머그

    삼성이 내 놓은 갤럭시 S24, AI 통번역 기능 등 업그레이드 된 성능으로 주목 받고 있습니다. 하지만 120만 원에서 173만 원까지 하는 높은 가격은 소비자들에게 큰 부담일 수밖에 없죠. 그.런.데.!!! S24...
    Date2024.02.18
    Read More
  13. 도대체 5G는 왜 구린가? 직접 사용해보니 깨달은 문제점들

    오랫동안 4G를 사용해오며 5G로 갈아탄지 대략 6개월이 지났습니다. 실제로 5G를 사용해보니 결과적으로 그렇게 만족스럽지는 못했는데요, 오늘은 간략한 제 후기와 5G가 앞으로도 크게 기대되지 않는 이유...
    Date2024.02.18
    Read More
  14. 뚜따에 진심인 형+과학자코스프레+현미경을구입했어

    [정종철] 뚜따에 진심인 형+과학자코스프레+현미경을구입했어 CPU 뚜따 교육자료ㅋㅋ
    Date2024.02.18
    Read More
  15. 삼성 노트북 SSD 교체시 윈도우 재설치 안하고 하드 바꾸는방법 SSD 교체 방법

    하드교체시 기존윈도우 사용하기 윈도우 재설치 안하고 하드 바꾸는 방법 컴퓨터에 물을 쏟았어요  
    Date2024.02.18
    Read More
  16. 과기정통부, 「정보보호산업의 글로벌 경쟁력 확보 전략」 발표

    △ ‘27년까지 시장규모 30조원 달성을 목표로 관련 예산 총 1조 1천억 원 투입  △ ’27년까지 총 1,300억원 규모의 「사이버보안 펀드」 조성을 통해 보안유니콘 기업 본격 육성 △ 제로트러스트 전환로드맵 ...
    Date2023.09.06
    Read More
  17. Inception: leaking the root hash from /etc/shadow on AMD Zen 4

      In this demo demonstrates leaking the root password has on an up-to-date Linux machine running Ubuntu 22.04 on kernel 5.19. The CPU is the latest generation, AMD Zen 4 microarchitectur...
    Date2023.08.13
    Read More
  18. 통계로 살펴보는 스미싱 공격 트렌드, 피해를 막는 방법은?

    안랩은 머신러닝(ML) 기반으로 탐지한 피싱 문자에 대해 분석 및 대응을 수행한다. 올해 2분기 특이사항으로는 가족 또는 기관 사칭 피싱 문자를 악용한 공격이 급증한 반면, 허위 결제 사기 문자 건수는 ...
    Date2023.07.21
    Read More
  19. 텔레그램 메신저 업데이트 사칭 메시지를 통한 피싱 주의 권고

    □ 개 요  o 텔레그램 메신저 등을 통한 피싱 시도가 빈번하게 발생하고 있어 전화번호 등 개인정보 유출과 악성앱 감염 등 2차 피해로 연계되지 않도록 사용자 주의 권고   □ 주요 내용  o 텔레그...
    Date2023.07.21
    Read More
  20. [인공지능과 반도체 5편] 챗GPT 등 인공지능의 시대 : 메모리의 연산 등

    인공지능(AI, Artificial Intelligence)은 현재 전 세계를 가장 뜨겁게 달구는 키워드다. SK하이닉스 뉴스룸에서는 [인공지능 반도체] 코너를 마련, 인공지능 전문가 정인성 작가와 함께 총 일곱 편의 기...
    Date2023.07.11
    Read More
  21. 아이들이 더 안전하게 인터넷을 사용하도록 돕는 방법

    아이들은 어릴 때부터 인터넷이 제공하는 다양한 교육적, 사회적 혜택을 누리며 성장합니다. 때문에 온라인에서 안전하게 활동하는 법을 배우는 것은 자녀 교육에 필수적인 부분입니다. 부모가 자녀와 함께...
    Date2023.06.11
    Read More
  22. 보안 담당자에게 꼭 필요한 리눅스 보안 툴은?

    2022년 쉬키테가(Shikitega), 스위스 아미 나이프(Swiss Army Knife)와 같은 새로운 리눅스(Linux) 악성코드가 등장하고, 리눅스 시스템을 대상으로 한 랜섬웨어 공격은 75%나 증가했다. 이 중 일부는 백신...
    Date2023.05.23
    Read More
  23. (애플페이 사용법) iPhone에서 Apple Pay로 비접촉식 결제하기

    iPhone에서 Apple Pay로 비접촉식 결제하기iPhone의 지갑 앱에 Apple Cash, 신용 카드 및 직불 카드를 저장한 경우, 상점, 식당 등에서 Apple Pay로 안전하게 비접촉식 결제를 할 수 있습니다. Apple Pay를...
    Date2023.03.22
    Read More
  24. MS 12월 보안 위협에 따른 정기 보안 업데이트 권고

    □ 12월 보안업데이트 개요(총 7종) o 등급 : 긴급(Critical) 4종, 중요(Important) 2종, 보통(Moderate) 1종 o 발표일 : 2022.12.14.(수) o 업데이트 내용 제품군 중요도 영...
    Date2022.12.14
    Read More
  25. Windows 11 2022 업데이트, 어떤 기능들이 개선됐나

    최신 Windows 업데이트는 우리 모두가 더 안전하고 확신을 가지고 원격 작업 세계를 계속 탐색하는 과정에서 귀하가 표현한 요구 사항에 중점을 둡니다. 시작에서 앱에 대한 폴더 만들기 고정된 앱을...
    Date2022.10.06
    Read More
  26. 구글이 검색을 보다 자연스럽고 직관적으로 만드는 방법

    이 블로그는 구글 The Keyword 블로그(영문)에서도 확인하실 수 있습니다.           구글은 20년 넘게 전 세계의 정보를 체계화해 모두가 편리하게 접근하고 이용할 수 있도록 하는 사명에 헌...
    Date2022.10.04
    Read More
  27. AI로 현실 세계를 재구성하는 NVIDIA DRIVE Sim

    자율주행 자동차 시뮬레이션은 두 가지 난제를 풀어야 합니다. 바로 인공지능(AI) 운전자가 시뮬레이션을 실제같이 인식할 정도로 충분히 세부적이고 사실적인 세상을 만드는 일, 완벽하게 훈련되고 테스트...
    Date2022.10.01
    Read More
  28. 윈도우 11 22H2 리뷰 | 작지만 환영할 만한 변화

    연 2회 기능 업데이트를 제공했던 윈도우 10과 달리 윈도우 11은 1년 단위로 기능 업데이트를 제공한다. 그리고 마침내 윈도우 11 2022 업데이트, 버전 22H2가 공개됐다. 참고로 여기서 ‘22’는 2022년을 의...
    Date2022.09.25
    Read More
Board Pagination Prev 1 2 3 4 5 6 7 8 9 10 ... 48 Next
/ 48