맨위로 가기
  • 공유 공유
  • 댓글 댓글
[이지 인사이트] FLock: 블록체인 기반 연합 머신 러닝
코인이지

2024.10.27 11:44:16

 

FLock 팀

개요: AI 개발의 빠른 속도는 주로 소수의 대기업이 중앙 집중식 제어를 유지하기 때문에 AI 생성 및 배포에 있어 상당한 과제를 강조했습니다. 이러한 접근 방식은 효과적인 거버넌스 및 감독 부족으로 인해 AI 모델 내 편향을 악화시킵니다. 또한 대중 참여를 감소시키고 심각한 데이터 보호 문제를 야기합니다. 데이터 및 모델 출력에 대한 독점적 통제는 사용자가 자신도 모르게 기업의 이익을 위한 데이터 세트에 기여함에 따라 혁신 및 공평한 데이터 사용을 위협합니다.

FLock은 온체인 인센티브 메커니즘을 통해 AI 개발 및 조정을 민주화합니다. 오픈 소스 개발 및 데이터 소유권을 장려함으로써 FLock은 참가자가 온체인 합의에 의해 결정되는 보상을 통해 모델, 데이터 및 컴퓨팅 리소스를 기여할 수 있는 개방적이고 협력적인 환경을 조성합니다. 이 접근 방식은 중앙 집중식 엔티티의 편향을 도입하지 않고도 투명성과 협업을 대규모로 개선합니다. 궁극적으로 FLock은 다양한 커뮤니티가 특정 목적에 맞는 AI 모델을 개발하여 특정 요구에 맞는 맞춤형 솔루션을 제공하고 AI 개발 및 배포 환경에 혁신을 가져올 수 있도록 합니다.

 

1. 소개

모든 분야에 걸쳐 협업은 역사적으로 혁신을 촉진했습니다. 이는 과학 및 디지털 분야에서 분명하게 드러납니다. 집단 전문 지식을 모아 우리는 빠르게 파괴적인 솔루션을 만들어 냈습니다. 현재 이러한 이상은 AI 개발 및 배포에 적용될 때 장벽에 직면합니다. 특히, 대중 참여 감소, 소수 기업의 집중된 통제 및 데이터 보호에 대한 만연한 우려가 있습니다. 한편, 블록체인 기술은 탈중앙화 금융, 투표 및 거버넌스와 같이 분산된 기업이 필요한 여러 영역에서 효율성을 입증했습니다. 블록체인을 활용하여 AI 개발을 혁신하기 위한 연구 및 배포가 현재 진행 중입니다.

커뮤니티 참여와 데이터 보호에 대한 확고한 의지를 바탕으로 하는 FLock은 블록체인을 사용하여 AI 생태계 민주화를 주도할 준비가 되어 있습니다.

A. AI 생성에 대한 중앙 집중식 제어의 문제점

오늘날 AI 영역에서 혁신의 주요 장애물은 중앙 집중식 제어입니다. 이러한 중앙 집중식 구조는 모든 AI 교육, 의사 결정 프로세스 및 데이터 저장이 단일 엔티티 또는 위치 내에서 제어되도록 합니다. 이로 인해 다음과 같은 문제가 발생합니다.

  • 단일 실패 지점: 기술 문제 및 사이버 공격으로 인한 중단에 취약합니다.
  • 가치 다원성: 가치 다원성의 부족은 단일 개체의 편향이 AI에 반영됨을 의미합니다. 중앙 집중식 기관이 모델에 대한 절대적인 통제권을 행사함에 따라 AI 출력 모델의 가치도 중앙 집중화됩니다. 예를 들어 Google의 생성형 AI 도구인 Gemini가 재구성한 세상은 널리 비판받고 있습니다.
  • 데이터 보호: OpenAI와 같은 폐쇄형 LLM(Large Language Models) 제공업체는 모델과의 모든 사용자 상호 작용을 모니터링할 수 있으므로 심각한 데이터 보호 문제가 발생합니다. 또한 이러한 중앙 집중식 프레임워크에서는 LLM과 상호 작용하는 모든 사용자가 자신도 모르게 모델 소유권을 유지하는 이러한 대기업에 데이터를 기여하게 됩니다. 기여 인센티브의 공정성을 높이고 사용자가 기여한 데이터의 가치를 보다 정확하게 평가해야 할 필요성이 시급합니다.
  • 거버넌스: 최근 연구에서는 거버넌스 부족으로 인해 모델 내 편향 및 부정확성이 두드러지게 악화되는 우려스러운 추세가 강조되었습니다.
  • 확장성: 데이터 볼륨과 작업 복잡성이 증가함에 따라 제한된 처리 능력이 병목 현상으로 작용합니다.
  • 혁신: 제한된 수의 개체만 실험할 수 있는 환경에서는 발전이 저해됩니다.

B. FLock의 솔루션

그림 1: 플록 시스템 로직. 작업이 생성되면 먼저 블록체인 기반 탈중앙화 트레이닝 플랫폼인 AI 아레나에서 모델을 훈련하고 검증한 다음, 참여자의 로컬 데이터를 사용하여 FL 얼라이언스에서 추가 미세 조정을 진행합니다. 마지막으로, AI 마켓플레이스의 애플리케이션에 의해 모델이 배포되고 피드백을 통해 모델이 더욱 개선됩니다.

그림 2: 플록 시스템 개요. AI Arena에서 과제가 생성되면 먼저 학습 노드에 의해 학습됩니다. 그런 다음 이러한 노드는 모델을 검증자에게 제출하고, 검증자는 각 제출물에 대한 점수를 평가하고 제안합니다. 검증자는 이 점수에 대한 합의에 도달하여 제출된 모델의 순위를 결정합니다. 그런 다음 합의 모델을 FL 고객에게 할당하면 고객은 로컬 데이터를 사용하여 모델을 미세 조정하고 개선하여 FL 글로벌 모델을 만들 수 있습니다. AI 아레나 합의 모델 또는 FL 글로벌 모델은 AI 마켓플레이스에서 배포 및 호스팅되어 다양한 애플리케이션에 인터페이스를 제공할 수 있습니다. AI Arena 트레이닝 노드, 검증자 및 FL 클라이언트는 시스템에 참여하기 위해 스테이킹을 해야 하며, 성과에 따라 보상을 받게 됩니다.

FLock은 탈중앙화 AI를 위한 블록체인 기반 플랫폼입니다. FLock은 AI 시스템에 대한 적극적인 참여를 막는 장애물을 제거하여 커뮤니티가 모듈식 및 탈중앙화 방식으로 모델, 데이터 또는 컴퓨팅 리소스를 기여할 수 있도록 합니다. AI 모델은 AI Arena에서 교육 및 검증하고 연합 학습(FL) Alliance에서 추가로 개선할 수 있습니다. 블록체인 기술을 활용하여 FLock은 참가자를 위한 인센티브 메커니즘을 도입하여 협력적인 환경을 조성합니다. 이를 통해 커뮤니티에서, 커뮤니티와 함께, 커뮤니티를 위해 만들어진 광범위한 목적별 모델을 개발하여 특정 요구를 충족하는 맞춤형 솔루션을 제공할 수 있습니다.

 

2. FLock의 핵심 기능

FLock은 AI 모델 개발 및 배포를 민주화하기 위해 다음과 같은 핵심 기능을 제공합니다.

그림 3: 플록 AI 아레나 작업의 워크플로 개요. 검증자는 합의 점수에 따라 보상을 받습니다. 두 가지 유형의 보상은 조회/과적합 공격을 완화하기 위해 훈련 노드에 인센티브를 제공하는 데 사용됩니다.

  • 탈중앙화 데이터: FLock은 데이터 소유권을 유지하고 공유를 장려하는 탈중앙화 데이터 시장을 제공합니다. 이를 통해 사용자는 데이터를 제어하고 데이터 공유에 대한 보상을 받을 수 있습니다.
  • 탈중앙화 컴퓨팅: FLock은 AI 모델 교육을 위한 컴퓨팅 리소스를 제공하는 탈중앙화 컴퓨팅 네트워크를 구축합니다. 이는 AI 개발에 대한 접근성을 높이고 중앙 집중식 컴퓨팅 인프라에 대한 의존도를 줄입니다.
  • 탈중앙화 모델: FLock은 커뮤니티가 AI 모델을 개발하고 공유할 수 있는 탈중앙화 모델 시장을 제공합니다. 이는 AI 모델 개발의 다양성과 혁신을 촉진합니다.
  • 온체인 인센티브 메커니즘: FLock은 참가자에게 모델, 데이터 및 컴퓨팅 리소스 기여에 대한 보상을 제공하는 온체인 인센티브 메커니즘을 사용합니다. 이는 AI 개발에 대한 참여를 장려하고 협력적인 환경을 조성합니다.
  • 오픈 소스 개발: FLock은 투명성과 협업을 촉진하는 오픈 소스 개발을 장려합니다. 이는 AI 모델의 품질과 신뢰성을 향상시킵니다.

그림 4: 예: 유효성 검사 빈도에 대한 속도 제한.

 

3. FLock의 장점

FLock은 AI 개발 및 배포에 다음과 같은 장점을 제공합니다.

그림 5: 이전 작업[14]에서 채택한 FLock FL 작업의 워크플로 개요. 각 라운드 동안 FL 클라이언트는 제안자 또는 투표자로 무작위로 선택됩니다. 이들의 스테이킹 금액은 다수결 투표 결과에 따라 보상을 받거나 삭감될 수 있습니다. 악의적인 클라이언트는 궁극적으로 FL 시스템에서 제거됩니다.

  • AI 민주화: FLock은 AI 개발 및 조정을 민주화하여 모든 사람이 AI 기술에 접근하고 기여할 수 있도록 합니다.
  • 데이터 보호 강화: FLock은 데이터 소유권을 사용자에게 돌려주고 데이터 공유에 대한 보상을 제공하여 데이터 보호를 강화합니다.
  • 투명성 및 협업 증진: FLock은 온체인 인센티브 메커니즘과 오픈 소스 개발을 통해 투명성과 협업을 증진합니다.
  • 맞춤형 AI 모델 개발: FLock은 다양한 커뮤니티가 특정 목적에 맞는 AI 모델을 개발하여 특정 요구에 맞는 맞춤형 솔루션을 제공할 수 있도록 합니다.
  • AI 개발 및 배포 환경 혁신: FLock은 탈중앙화 데이터, 컴퓨팅 및 모델을 통해 AI 개발 및 배포 환경을 혁신합니다.

 

4. 결론

FLock은 AI 개발 및 배포를 민주화하고 데이터 보호를 강화하며 투명성과 협업을 증진하는 혁신적인 플랫폼입니다. FLock은 탈중앙화 데이터, 컴퓨팅 및 모델을 통해 AI 개발 및 배포 환경을 혁신하고 다양한 커뮤니티가 특정 목적에 맞는 AI 모델을 개발하여 특정 요구에 맞는 맞춤형 솔루션을 제공할 수 있도록 합니다. FLock은 AI 기술의 미래를 위한 중요한 단계이며 AI 개발 및 배포 방식을 변화시킬 잠재력을 가지고 있습니다.

레퍼런스: Whitepaper | FLock

댓글 1

0/1000

다사랑

2024.10.28 11:10:37

좋은 글 감사합니다.

답글달기

0

0
0

이전 답글 더보기

1