출처 · Hugging Face Forums
media Hugging Face Forums · 5시간 전 · 조회수 1회

helloadhavan, Common Crawl에서 구조화된 Markdown 추출을 위한 CC-FilteredCorpus 출시

사용자 helloadhavan은 Common Crawl을 필터링하고 콘텐츠를 깔끔한 Markdown으로 추출하도록 설계된 CC-FilteredCorpus라는 데이터셋을 만들었습니다. 이 프로젝트는 모든 것을 평평한 텍스트로 만드는 대신 제목, 목록, 링크, 코드 블록 및 테이블을 포함한 유용한 문서 구조를 보존하는 것을 목표로 합니다.

media Hugging Face Forums · 1일 전 · 조회수 1회

ThetaMem은 고정 상태 시퀀스 메모리를 위해 부호 있는 승법 키 리프트를 제안합니다

ThetaMem은 재귀적 혼합기(recurrent mixer)에 대한 초기 단일 시드 연구로, 게이트 메커니즘을 정교화하는 대신 학습된 부호 있는 하다마르 또는 외적(key lifts)을 통해 재귀 상태를 수정합니다. 저자는 합성 벤치마크에서 혼합된 결과를 제시하며, 접근 방식을 반증할 수 있는 가장 저렴한 실험을 식별하기 위해 비판을 명시적으로 구합니다.

media Hugging Face Forums · 2일 전 · 조회수 1회

저자가 검증 가능한 AI 의사결정 계보를 위한 개방형 '인과 봉인' 제안

AI 의사결정 계보를 위한 개방형, 모델 비종속 형식의 저자는 "상호작용 카드"라는 새로운 표준에 대한 커뮤니티 피드백을 구하고 있습니다. 이 이니셔티브는 자체 모델을 문서화하는 기존 모델 카드를 보완하여 특정 출력이 어떻게 생성되었는지 검증하는 격차를 해소하는 것을 목표로 합니다.

media Hugging Face Forums · 4일 전 · 조회수 9회

RunSnack은 단일 링크를 통해 P2P GPU 공유를 가능하게 합니다

RunSnack은 계정이나 클라우드 플랫폼의 필요성을 제거하고 단일 링크를 통해 사용자가 다른 사용자와 직접 GPU 컴퓨팅을 공유할 수 있게 하는 도구입니다. 이는 전통적인 인프라 없이 A100 또는 4090과 같은 하드웨어에 대한 단기 접근이 필요한 ML 연구자 및 학생을 대상으로 합니다.

media Hugging Face Forums · 9일 전 · 조회수 3회

QuantCheck, 4비트 양자화에 최종 체크포인트가 최선이라고 가정하지 말라고 경고

QuantCheck라는 새로운 도구는 사전 훈련의 최종 체크포인트가 4비트 양자화에 최적의 선택이 아닐 수 있음을 강조합니다. 벤치마크가 평탄하게 유지되는 동안 취약성이 증가할 수 있기 때문입니다. 저자는 Pythia-160m에서 이 패턴을 관찰했으며, 최종 체크포인트는 동일한 품질의 이전 체크포인트보다 약 4배 더 많은 품질 손상을 입었습니다.