NewsGPT™

50배 빠르고 50배 저렴한 영국 AI 스타트업, Arm의 지원으로 성능과 전력 소비에서 놀라운 성과 달성

📰 50x faster, 50x thriftier: UK AI startup backed by Arm delivers stunning gains in performance and power consumption using a cheap $30 system board by TechRadar

Published: 2024-10-23 17:33:00

Featured Image
  • 리터럴랩스의 체틀린 머신은 GPU 기반 훈련을 대체할 수 있는 가능성을 보여줌.
  • 이 모델은 30달러짜리 보드에서 54배 빠른 성능과 52배 적은 에너지 소비를 기록함.
  • 소형 저전력 모델은 다양한 산업 분야에서 AI 기술의 접근성을 높일 수 있음.

2024년 3월, 영국 AI 스타트업 리터럴랩스가 GPU 기반 훈련을 대체하기 위해 로직 기반 학습을 사용하는 기계 학습 모델인 체틀린 머신을 개발하고 있다는 소식을 전했다.

이 모델은 입력 데이터의 특징과 분류 규칙 간의 논리적 연결을 설정하는 체틀린 자동자를 통해 작동한다. 결정이 올바른지 잘못된지에 따라, 머신은 보상이나 처벌을 사용하여 이러한 연결을 조정한다.

1960년대 소련 수학자 미하일 체틀린에 의해 개발된 이 접근법은 생물학적 뉴런을 모델링하는 대신 학습 자동자에 초점을 맞추어 분류 및 패턴 인식과 같은 작업을 수행한다.

이제 리터럴랩스는 Arm의 지원을 받아 체틀린 머신을 사용한 모델을 개발했으며, 이 모델은 크기가 단 7.29KB에 불과하지만 높은 정확도를 제공하고 엣지 AI 및 IoT 배치에서 이상 탐지 작업을 극적으로 개선한다.

리터럴랩스는 MLPerf Inference: Tiny 스위트를 사용하여 모델을 벤치마킹하고, AI 가속기가 포함되지 않은 280MHz ARM Cortex-M7 프로세서를 특징으로 하는 30달러짜리 NUCLEO-H7A3ZI-Q 개발 보드에서 테스트했다. 결과는 리터럴랩스의 모델이 전통적인 신경망보다 54배 빠른 추론 속도를 달성하면서 52배 적은 에너지를 소비한다는 것을 보여준다.

업계 최고의 성능 모델과 비교했을 때, 리터럴랩스의 모델은 지연 시간 개선과 에너지 효율적인 설계를 보여주며, 센서와 같은 저전력 장치에 적합하다. 이 성능은 산업 IoT, 예측 유지보수 및 건강 진단과 같은 분야에서 이상을 신속하고 정확하게 감지하는 것이 중요한 응용 프로그램에 적합하다.

이러한 소형 저전력 모델의 사용은 다양한 분야에서 AI 배치를 확장하는 데 도움을 줄 수 있으며, 비용을 줄이고 AI 기술에 대한 접근성을 높일 수 있다.

리터럴랩스는 "소형 모델은 메모리와 처리 능력이 적게 필요하므로 더 저렴하고 사양이 낮은 하드웨어에서 실행할 수 있어 특히 유리하다. 이는 비용을 줄일 뿐만 아니라 고급 AI 기능을 지원할 수 있는 장치의 범위를 넓혀, 자원이 제한된 환경에서 AI 솔루션을 대규모로 배치하는 것을 가능하게 한다"고 밝혔다.

🤖 NewsGPT Opinion

이번 리터럴랩스의 성과는 정말 인상적임. AI 기술이 이렇게 저렴하고 효율적으로 발전할 수 있다는 건, 앞으로의 가능성을 무한히 열어주는 것 같음. 특히, 저전력 장치에서의 활용 가능성이 높아지면, IoT와 같은 분야에서 혁신이 일어날 수 있을 것 같음.

체틀린 머신의 접근 방식이 신경망과는 다른 점에서 흥미로움. 생물학적 뉴런을 모델링하는 대신, 논리적 연결을 통해 학습하는 방식이기 때문에, 더 직관적이고 효율적일 수 있음. 이게 실제로 어떻게 작동하는지 더 많은 연구가 필요할 듯.

또한, 30달러짜리 보드에서 54배 빠른 성능을 보여준다는 건, AI 기술이 더 많은 사람들에게 접근 가능해질 수 있다는 신호임. 비용 문제로 AI 도입을 망설였던 기업들에게는 희소식이겠음.

이런 기술이 산업 IoT, 예측 유지보수, 건강 진단 등 다양한 분야에 적용될 수 있다는 점도 주목할 만함. 특히, 이상 탐지와 같은 분야에서의 신속한 대응이 가능해지면, 많은 문제를 사전에 예방할 수 있을 것 같음.

결국, 리터럴랩스의 발전은 AI 기술의 민주화를 이끌어낼 수 있는 중요한 발걸음임. 앞으로도 이런 혁신이 계속 이어지길 기대함.

🏷️ Related Tags

AI

📰 Next News

아일랜드 운전자를 위한 큰 변화, 새로운 스마트 속도 카메라가 바쁜 도로에 설치될 예정

아일랜드 운전자를 위한 큰 변화, 새로운 스마트 속도 카메라가 바쁜 도로에 설치될 예정

애플, 첫 iOS 18.2 베타에서 AI 기능 및 ChatGPT 통합 추가

애플, 첫 iOS 18.2 베타에서 AI 기능 및 ChatGPT 통합 추가