윈도우 / MS Windows 11 버전 24H2의 AI 신기능 (2024 업데이트)
2024.09.19 19:45
AI에 관심이 없다면 이 가이드가 마음에 들지 않을 것입니다.
Windows 11은 세 번째 기능 업데이트를 앞두고 있으며, 이 새로운 버전은 이전에 본 적이 없는 새로운 AI 혁신을 대거 도입했기 때문에 다른 어떤 버전과도 다릅니다.
운영 체제는 하반기 버전 24(2024 업데이트)의 일환으로 새로운 Windows 코파일럿 런타임을 도입하여 일부 받은 편지함 앱에 대해 Windows 리콜, 라이브 캡션, 자동 슈퍼 해상도, 음성 선명도, 스튜디오 효과 및 기타 AI 기능과 같은 많은 AI 기능을 실행할 수 있게 되었습니다.
이 가이드에서는 Windows 11 2024 업데이트의 일부로 제공될 것으로 예상되는 AI 기능에 대해 자세히 알아보겠습니다.
Windows 11 2024 업데이트에 적용되는 AI 변경 사항
이번 기능 업데이트에서 Microsoft는 AI 기반 기능을 거의 12개 추가할 예정이며, 대부분 인터넷 연결 없이 로컬에서 작동합니다.
Windows 코파일럿 런타임
Windows 11에서 기본적으로 AI의 핵심인 Windows Copilot Runtime부터 시작하겠습니다. 이는 기기에서 로컬로 실행할 수 있는 40개 이상의 다양한 AI 모델을 통합하는 운영 체제의 '계층'입니다.
(Image credit: Microsoft)
이러한 AI 모델 중 일부에는 대형 언어 모델(LLM)에서 찾을 수 있는 많은 이점을 제공하는 Microsoft의 소형 언어 모델(SLM)인 Phi Silica가 포함되어 있습니다. 또한 화면 영역 감지기, 광학 문자 인식기, 자연어 파서, 이미지 인코더와 같은 모델도 있습니다.
(Image credit: Microsoftq)
이러한 통합의 일환으로 개발자가 애플리케이션에 AI 기능을 쉽게 통합할 수 있는 API(애플리케이션 프로그래밍 인터페이스) 모음인 Windows 코파일럿 라이브러리도 사용할 수 있도록 하고 있습니다. 이 라이브러리는 항상 컴퓨터에서 수동적으로 실행되어 새로운 AI 기능을 활성화할 수 있습니다.
Copilot과 같이 클라우드에 종속적인 일부 AI 기능이 있지만, Windows Copilot Runtime을 사용하면 클라우드에 데이터를 보내지 않고도 많은 기능을 로컬에서 실행할 수 있습니다.
Windows Recall
리콜은 Windows 11(24H2 버전)에 출시되는 가장 기대되는 기능이자 논란의 여지가 있는 기능입니다. 이 기능은 사용자가 하는 모든 작업의 스크린샷을 지속적으로 촬영하며, NPU(신경 처리 장치)의 도움을 받아 기기에서 실행되는 여러 AI 모델을 사용하여 (말 그대로) 녹화합니다. 그런 다음 이 기능은 콘텐츠와 컨텍스트를 분석하고 장치의 모든 것을 새로운 Windows 시맨틱 인덱스에 저장합니다.
무언가를 찾아야 할 때마다 '리콜' 앱을 실행하여 자연어로 검색하거나 타임라인 슬라이더를 사용하여 시간을 뒤로 스크롤할 수 있습니다. 스냅샷을 선택하면 스크린레이를 통해 콘텐츠와 더 쉽게 상호 작용하고 텍스트나 이미지를 복사할 수 있습니다.
(Image credit: Mauro Huculak)
또한 사용 가능한 컨트롤을 사용하여 애플리케이션이나 웹사이트를 열거나, 스냅샷을 공유, 삭제하거나, 스니핑 도구로 스냅샷을 열 수도 있습니다.
이 기능을 사용하려면 스냅샷과 인덱스 데이터베이스를 저장할 수 있는 스토리지가 필요합니다. 256GB 하드 드라이브가 있는 컴퓨터의 기본 스토리지 할당은 25GB이며, 스토리지 드라이브의 크기에 따라 할당이 증가합니다.
설정 앱에서 시스템은 기능 상태, 저장소 및 필터를 제어하는 새로운 "리콜 및 스냅샷" 페이지를 추가하여 리콜 환경에 참여하기 위한 웹사이트와 앱을 제외합니다.
(Image credit: Mauro Huculak)
Windows 리콜은 Microsoft Edge 및 Google Chrome과 같은 Chrome 기반 브라우저에서 InPrivate 또는 Incognito를 사용할 때 웹 사이트를 추적하지 않으며 필터 설정을 사용하여 해당 기능을 추적하지 않으려는 특정 웹 사이트를 제외할 수 있다는 점에 유의하는 것이 중요합니다
이 기능은 많은 경우에 유용할 수 있지만, 사용자의 신뢰를 얻지 못해 여전히 논란의 여지가 있습니다. 의심스러운 보안 및 개인정보 보호 문제가 많으며, 그 중 일부는 Microsoft가 신속하게 해결하기 위해 조치를 취했습니다..
물론 회사에 따르면 리콜에 대한 접근 방식은 Microsoft Pluton 보안 프로세서 사용, Windows Hello 인증, BitLocker를 사용한 장치 암호화 등 가장 엄격한 보안 지침을 따르지만, 옳지 않다고 느껴지는 부분이 많습니다.
예를 들어, Windows 리콜은 스냅샷 프로세스 중에 발견되는 정보를 조정하지 않으므로 민감한 정보는 즉시 검색할 수 있습니다.
이 기능을 처음 공개했을 때 리콜 데이터는 누구나 수집할 수 있도록 암호화되지 않은 채 기기에 저장되었지만, 이 기능이 새롭게 변경되면 이 데이터가 암호화되고 Windows 리콜을 사용하여 검색하려면 앱을 사용하는 인증이 필요합니다.
이 문서에서 Windows 리콜에 대해 자세히 설명할 수 있습니다.
Windows 스튜디오 효과
Windows Studio Effects는 NPU를 사용하여 웹캠이나 마이크에 특수 효과를 적용하는 기능 모음입니다. 이 기능이 완전히 새로운 것은 아니지만, 이제 Microsoft는 버전 24H2부터 호환되는 장치에서 광범위하게 사용할 수 있도록 할 예정입니다.
효과의 일부로, 기기에서 사용할 수 있는 지원에 따라 배경 블러, 아이 컨택트, 자동 프레이밍, 음성 포커스, 인물 조명, 크리에이티브 필터, 음성 포커스에 액세스할 수 있습니다.
빠른 설정 플라이아웃에서 "스튜디오 효과" 페이지를 사용하고 사용하려는 기능을 켜거나 끌 수 있습니다.
(Image credit: Microsoft)
설정 > 블루투스 및 장치 > 카메라에서 이러한 설정을 제어할 수도 있습니다. 목록에서 카메라를 선택하면 사용 가능한 기능이 "카메라 효과" 설정에 표시됩니다.
배경 효과에는 표준 및 세로 흐릿함이 포함됩니다. 아이컨택은 눈을 연결하여 카메라를 보는 것처럼 보이게 하고 표준 모드 또는 텔레프롬프터 모드를 선택할 수 있습니다.
자동 프레임은 시야를 확대하고 잘라내어 화면의 중심을 유지합니다. 세로 조명은 조명 조건을 개선하여 저조도 환경에서도 시야를 개선합니다. 크리에이티브 필터는 재미있는 애니메이션과 플레어를 추가하고 음성 포커스는 화상 통화 중 배경 소음을 필터링합니다.
장치에서 사용할 수 있는 효과는 NPU의 주변 장치와 기능에 따라 달라집니다.
라이브 캡션
라이브 캡션은 Windows 11에서 한동안 사용되어 온 또 다른 기능입니다. 2024 업데이트가 출시되면서 이 기능은 이제 AI로 구동되며 라이브 번역이 포함되어 있습니다.
(Image credit: Microsoft)
라이브 번역은 Windows 11의 모든 오디오 소스에서 자동으로 전사 및 번역을 통해 누구나 오디오를 이해할 수 있도록 돕는 접근성 기능입니다. 예를 들어, 라이브 번역은 YouTube 동영상이나 음성 통화를 번역하는 데 사용됩니다.
음성 명확성
Microsoft는 또한 대화나 녹음 중에 AI를 사용하여 실시간 배경 소음을 분석하고 제거하는 새로운 기능인 Voice Clarity를 추가합니다.
이 기능은 자동으로 작동하므로 관리할 설정이 없습니다. 원래 이 기능은 Surface 장치용으로 예약되었지만 NPU 없이 2024년 업데이트의 일부로 사용할 수 있습니다.
이 기능은 NPU가 없는 장치에서 사용할 수 있으므로 모든 AI 기능에 기존 컴퓨터에 하드웨어가 필요하지 않다는 것을 나타냅니다.
자동 슈퍼 해상도
이 기능은 또 다른 기대작입니다. 자동 슈퍼 해상도(Auto SR)는 온디바이스 AI를 사용하여 게임을 업스케일링하여 프레임 속도와 화질을 개선하는 기능입니다.
이 기능은 NVIDIA DLSS 슈퍼 해상도, AMD 피델리티FX 슈퍼 해상도, 인텔 XeSS와 유사하게 작동하지만, Auto SR은 개발자가 게임을 업데이트할 필요 없이 자동으로 게임을 업그레이드합니다.
(Image credit: Microsoft)
이 기능을 켜면 Auto SR은 고급 프로세스를 GPU(그래픽 처리 장치)가 아닌 NPU(신경 처리 장치)로 처리합니다. 그 결과 더 나은 게임 경험뿐만 아니라 에너지 효율성도 경험할 수 있습니다.
이 설정은 "그래픽" 페이지를 통해 사용할 수 있으며, 컴퓨터 또는 응용 프로그램마다 전체적으로 설정할 수 있습니다.
게임을 시작하고 Auto SR과 호환되는 경우, 시스템에 토스트 알림이 표시되어 지원을 사용할 수 있음을 알려주고 설정 앱에서 게임을 켤 수 있는 옵션이 표시됩니다.
Microsoft는 또한 Qualcomm과 함께 웹사이트를 만들어 Windows 11의 ARM 버전과 호환되는 게임을 나열했습니다. 이 페이지에는 이 게임이 자동 슈퍼 해상도와도 호환되는지 여부도 표시됩니다. 그러나 출시 시 보더랜드 3, 컨트롤(DX11), 다크 소울즈 3, 갓 오브 워, 킹덤 컴을 포함하여 12개 미만의 게임이 지원됩니다: 딜리버런스, 레지던트 이블 2, 레지던트 이블 3, 세키로 섀도우 다이 두 번, 스나이퍼 고스트 워리어 컨트랙트 2, 위쳐 3 등이 지원됩니다.
자동 슈퍼 해상도(Auto SR)는 일반적으로 인텔, AMD, 엔비디아의 업스케일링 기술을 의미하는 슈퍼 해상도(SR)와 다릅니다.
Auto SR 기능과 관련하여 Microsoft는 인텔, AMD, 엔비디아와 협력하여 게임 개발자가 각 기술을 수동으로 통합하는 대신 기존 업스케일링 AI 기술을 단일 API 세트에 통합할 수 있는 새로운 기술인 새로운 DirectSR도 개발했습니다.
사진용 이미지 스타일 변경
이제 사진 앱에는 휴대폰에서 사용하는 필터와 유사한 다양한 사진 기법을 사용하여 사진의 스타일을 변경할 수 있도록 온디바이스 AI를 사용하는 새로운 '스타일 이미지' 기능이 추가되었습니다.
(Image credit: Microsoft)
텍스트 프롬프트를 사용하여 이미지의 배경 및 기타 부분을 변경하는 방법을 설명하고 사진에 지시할 수도 있습니다.
또한 Microsoft는 텍스트 프롬프트를 AI가 포함된 이미지로 변환하기 위해 '이미지 크리에이터'를 페인트 앱에서 사진으로 가져옵니다. 이 특정 기능은 코파일럿 AI 기술을 사용하여 클라우드를 사용하여 OpenAI DALL-E 언어 모델을 사용하여 이미지를 생성합니다.
페인트용 공동 제작자
페인트 앱에는 '이미지 크리에이터' 기능 외에도 그림을 스캔하고 작품을 만드는 데 도움이 되는 새로운 기능인 '코크리에이터'가 추가되어 있습니다.
(Image credit: Microsoft)
이 기능을 텍스트 프롬프트와 함께 사용하고 슬라이더 옵션을 사용하여 창의성 강도를 조정할 수 있습니다.
이 특정 기능은 확산 기반 알고리즘을 사용하여 최소한의 노력으로 고품질 이미지를 그릴 수 있습니다.
적어도 처음에는 Cocreator가 Copilot+ PC의 기능이 될 것입니다..
코파일럿 앱
Windows 11 2024 업데이트에서 이 소프트웨어 대기업은 오른쪽에서 미끄러져 들어오는 사이드 패널 대신 새로운 앱과 Copilot AI 통합을 변경합니다.
(Image credit: Mauro Huculak)
이 앱은 실제로 앱 프레임에 감싼 챗봇 AI의 Copilot.Microsoft.com 버전입니다. 이 경험은 사용자의 빠른 기록을 위한 왼쪽 패널과 새로운 대화, 플러그인, 노트북 시작과 같은 기타 옵션이 있는 ChatGPT 웹 인터페이스와 유사한 새로운 디자인을 도입했습니다.
페이지 상단의 옵션을 사용하여 대화 스타일을 변경할 수도 있습니다.
이러한 변경으로 인해 더 이상 Copilot을 사용하여 설정을 변경할 수 없으며, "Copilot" 버튼은 더 이상 시스템 트레이에 포함되지 않으며, Microsoft도 설정 앱에서 "Copilot" 설정을 제거합니다.
또한 텍스트, 이미지, 오디오, 비디오를 입력과 출력으로 처리할 수 있는 OpenAI GPT-4o로 코파일럿 인텔리전스를 업데이트할 계획입니다.
Copilot은 클라우드에 의존하여 응답을 분석하고 처리하기 때문에 모든 사람이 사용할 수 있는 기능이며 Copilot+ PC 전용이 아닙니다.
코파일럿 제안
더 이상 코파일럿 앱을 사용하여 시스템 설정을 변경할 수는 없지만, Microsoft는 "코파일럿 제안"도 도입하고 있습니다
코파일럿 제안은 챗봇 AI가 도움이 될 수 있다는 것을 알고 있을 때 애플리케이션에 표시됩니다. 예를 들어, 설정 앱에서 페이지 상단에 문제 해결, 기능 활성화 등을 위한 제안이 표시될 수 있습니다.
파일 탐색기에서 이미지 위를 맴돌면 Copilot 프롬프트 인터페이스가 표시될 수 있습니다. 이 프롬프트를 사용하여 이미지에 대한 질문을 하고 배경 제거, 다른 이미지 생성 또는 크기 조정과 같은 작업을 수행할 수 있습니다.
이메일을 받으면 문서 첨부 파일 등을 요약하는 제안과 함께 토스트 알림이 표시될 수 있습니다.
중요: Windows 11 2024 업데이트는 2024년 6월 18일에 Copilot+ PC용으로 부분적으로 제공되었지만, 추후 공지가 있을 때까지 연기되었기 때문에 Windows 리콜을 포함한 모든 기능이 포함되지는 않을 것입니다. 9월이나 10월에는 기존 기기에서 더 광범위하게 기능 업데이트를 이용할 수 있게 됩니다. 따라서 일부 새로운 기능과 변경 사항은 첫날에 모든 사람이 사용할 수 없는 경우가 있습니다. 또한 일부 기능(특히 AI 기능)은 새로운 하드웨어를 사용해야 할 수도 있습니다.
댓글 [1]
-
따돔 2024.09.20 14:32
감사 합니다~