콘텐츠

• Pixel의 신경 핵심은 어떻게 작동합니까?
• 신경 핵심은 무엇을 할 수 있습니까?
• 미래의 물결

Google Pixel 4 및 Pixel 4 XL은 부분적으로 Pixel Neural Core가 포함되어있어 회사 최고의 소프트웨어 기능과 카메라 기능을 자랑합니다. 이 작은 칩은 Pixel 4의 메인 프로세서와 함께 Google의 강력한 기계 학습 워크로드를 효율적으로 실행합니다. 이미지 처리에서 음성 인식 및 전사 기능까지 다양합니다.

Neural Core는 스마트 폰용 사내 기계 학습 프로세서에서 Google의 첫 번째 균열은 아닙니다. Pixel 2와 3은 Pixel Visual Core와 함께 제공되어 HDR +와 같은 이미징 작업을 오프로드하여 성능과 에너지 효율성을 향상시킵니다. Pixel 4의 Neural Core는 개선 된 기능과 다양한 새로운 사용 사례를 바탕으로이 토대 위에 구축됩니다.

놓치지 마세요 : 다음은 Pixel 4의 Astro 모드가 수행 할 수있는 작업입니다.

Pixel의 신경 핵심은 어떻게 작동합니까?

Google은 아직 신경 코어 내부에서 진행되는 작업에 대한 세부 정보를 공유하지 않았습니다. 그러나 이전 세대 Visual Core의 작동 방식과 머신 러닝 (ML) 프로세서에서 일반적으로 사용되는 기술 유형을 알고 있습니다.

광범위한 컴퓨팅 작업을 처리하도록 구축 된 기존 CPU와 달리 신경 코어와 같은 머신 러닝 프로세서 (NPU)는 몇 가지 복잡한 수학적 작업에 최적화되어 있습니다. 따라서 DSP (Digital Signal Processor) 또는 GPU (Graphics Processing Unit)와 유사하지만 머신 러닝 알고리즘에서 사용하는 특정 작업에 최적화되어 있습니다.

Fused multiply-accumulate는 CPU 내부에서 광범위하게 지원되지 않는 매우 일반적인 이미징 및 음성 ML 작업입니다. 최신 32 및 64 비트 CPU와 달리 이러한 작업은 16, 8 및 4 비트의 데이터 크기에서 수행됩니다. 최대 효율로 이러한 작업을 지원하려면 사용자 지정 하드웨어 블록이 필요합니다.

Neural Core는 CPU 또는 GPU에서 덜 효율적으로 실행되는 이미지 및 음성 알고리즘을 가속화합니다.

Neural Core는 전용 산술 논리 장치를 하드웨어에 구축하여 여러 CPU 사이클을 사용하지 않고 이러한 명령을 신속하고 최소의 전력 소비로 처리합니다. 이 칩은 여러 코어에있는 수백 개의 ALU와 로컬 메모리 공유 및 작업 스케줄링을 감독하는 마이크로 프로세서로 구성되어 있습니다.

구글은 어시스턴트, 음성 및 이미징 소프트웨어 알고리즘을 중심으로 최신 하드웨어 설계를 거의 확실하게 최적화 할 것이다. Neural Core의 ALU 기능에 의존하기 때문에 Pixel 4의 최신 사진 기능이 구형 핸드셋에 적용되지 않습니다.

신경 핵심은 무엇을 할 수 있습니까?

Neural Core는 Google Pixel 4 및 Pixel 4 XL에 포함 된 여러 가지 새로운 기능의 핵심 요소 인 것으로 보입니다. 이러한 개선은 주로 이미지 및 음성 처리를 중심으로합니다.

사진 측면에서이 목록에는 이중 노출 컨트롤, 천체 사진 모드, 라이브 HDR + 미리보기 및 야간 투시경이 포함됩니다. Google의 Pixel 4는 이중 노출 조정 및 HDR +를 실시간으로 수행하므로 사용자가 셔터를 누르기 전에 사진의 결과를 볼 수 있습니다. 이는 픽셀 3에 비해 이미지의 계산 능력이 크게 향상되었음을 나타냅니다.

또한이 전화기는 카메라 시스템에 학습 기반 화이트 밸런스를 도입하여 저조도 사진과 관련된 노란색 색조를 고정시킵니다. Astro Night Sight 모드에는 다중 노출 캡처, 하늘 감지 및 이미지 조합이 사용되므로 대량의 처리 및 이미지 감지 스마트가 필요합니다. 마지막으로 Pixel 4의 상용 얼굴 기능은 자주 사진을 찍는 사람들의 더 나은 사진을 식별하고 추천합니다.

Pixel 4는 또한 클라우드가 아닌 장치에서 기본적으로 실행할 수있는 향상된 언어 모델을 자랑하는 업데이트 된 어시스턴트를 자랑합니다. 새로운 음성 기능에는 대화 계속, 녹음기 앱을 통한 오디오 녹음 및 향상된 음성 인식 기능이 포함됩니다. Neural Core는 휴대폰의 3D 얼굴 잠금 해제 기술에서도 중요한 역할을합니다.

미래의 물결

Google의 Neural Core는 회사에서 가장 강력한 사내 스마트 폰 실리콘 제품으로, 이전보다 더 효율적인 실시간 이미지 편집이 가능합니다. Google은 업계 최고의 머신 러닝 기술에 자부심을 가지고 있으며 Pixel 4의 가장 큰 판매 포인트는 이러한 투자 결과에 의존합니다.

그러나 Pixel 4가 강력한 머신 러닝 프로세서를 자랑하는 유일한 스마트 폰은 아닙니다. Snapdragon 855로 구동되는 모든 스마트 폰은 전용 기계 학습 하드웨어를 제공합니다. Google은 분명히 스마트 폰에 대한 요구가 다르고 더 강력한 요구 사항을 가지고 있습니다. 마찬가지로 Huawei의 Kirin 990은 실시간 보케 비디오 효과 등을 위해 충분히 강력한 듀얼 사내 NPU를 자랑합니다.

머신 러닝 하드웨어는 빠르게 주요 스마트 폰 이미지, 비디오 및 AI 기능의 초석이되고 있습니다. Google은 Pixel 4와 Neural Core를 사용하여 팩 상단 근처에 배치합니다.

다음 단계 : Google의 Pixel 카메라는 전혀 카메라가되지 않습니다