M1맥미니 클러스터와 rtx3090 에서 deepseek 구동 성능은?

M1맥미니 클러스터와 rtx3090 에서 deepseek 구동 성능은?

당연히 rtx3090이 성능이 좋을듯하다.

예상은 했지만 수치로 알려주니 좋.

DeepSeek(딥러닝 모델) 실행 속도를 비교하려면 컴퓨팅 성능(CPU, GPU, RAM), 병렬 처리 가능 여부, 모델 최적화 상태 등을 고려해야 해.

1. 비교 대상 스펙

• M1 Mac mini (6대)

• 가격: 35만 원 × 6 = 210만 원

• CPU: Apple M1 (8코어)

• GPU: M1 내장 GPU (약 2.6 TFLOPS)

• RAM: 8GB 또는 16GB (모델에 따라 다름, 가정 필요)

• 특징: 썬더볼트 네트워크 활용 가능, 저전력

• RTX 3090 + 5900X 시스템 (1대)

• 가격: 230만 원

• CPU: Ryzen 9 5900X (12코어 24스레드)

• GPU: RTX 3090 (약 35 TFLOPS)

• RAM: 128GB

• 특징: 강력한 GPU 연산 능력, 대용량 RAM 활용 가능

2. 성능 비교

항목

M1 Mac Mini (6대)

RTX 3090 시스템

CPU 성능

M1(8코어) × 6 = 48코어

5900X (12코어 24스레드)

GPU 성능

M1 GPU (2.6TFLOPS) × 6 = 15.6 TFLOPS

RTX 3090 (35 TFLOPS)

RAM

8GB × 6 = 48GB (또는 16GB × 6 = 96GB)

128GB

병렬 처리

OpenMPI 또는 Ray로 활용 가능하지만 CPU 기반

GPU 가속 가능 (PyTorch/TensorFlow CUDA 지원)

GPU 연산 성능 차이

• M1 Mac mini의 내장 GPU는 OpenCL을 지원하지만, CUDA가 없어 PyTorch/TensorFlow의 GPU 가속을 활용할 수 없음.

• RTX 3090의 연산 능력(35TFLOPS)은 M1 6대를 합친 것보다 최소 2배 이상 빠름.

CPU 및 RAM 성능

• M1 6대를 합쳐도 5900X보다 병렬 처리 효율이 뛰어나지 않음.

• 3090 시스템은 128GB RAM을 활용할 수 있어, 메모리 부족 없이 대형 모델을 구동 가능.

3. 결론: 어떤 시스템이 더 빠를까?

• RTX 3090 + 5900X 시스템이 압도적으로 유리함.

• 이유: GPU 가속 가능(CUDA 지원), 단일 시스템으로 높은 연산 능력 발휘.

• M1 Mac 6대는 CPU 기반 분산 처리가 가능하지만, 성능 최적화가 어렵고 속도가 떨어짐.

• RAM 128GB 덕분에 대형 모델 실행에서도 유리함.

✅ 추천: RTX 3090 시스템 구매 (230만 원)

DeepSeek 같은 딥러닝 모델은 GPU 가속이 핵심이므로, CUDA 가속이 가능한 3090 시스템이 훨씬 빠름. M1 Mac 여러 대를 묶어도 3090의 성능을 따라가기 어려움.

Read more

토토와 단둘이 여수 여행

토토와 단둘이 여수 여행

이번엔 여수 여행이다. 단둘이 말이다. 토토맘은 제주로...나는 여수로....ㅋㅋㅋㅋ 아주 좋다. 편하다. 토토는 장시간 운전이 피곤한 모양새이다. 언제나 그렇듯이 녀석은 차로 이동하는건 별로인것 같다. 하지만 할수 없다. 대신 좋아라 하는 간식 북어체를 한봉지 사서 미안한 맘을 좀 표현해보고 최대한 산책도 많이 시켜주려 한다.

By ilikeafrica

일본 삿포로 오타루 여행

삿포로 여행중 오후 느즈막히 오타루행 JR 열차를 발권을 하고 정보 없는 곳으로 출발했다. 가면서 창밖으로 보이는 풍경은 아무래도 베를린의 동독 지역이었다. 일본과 독일이 그 옛날 왕래가 잦았다더니 이런 하나 하나 까지 서로가 맞았나부다. 트램도 그렇고 집짓는것도 그렇고 돌아보면 볼수록 동독 냄새가 너무 난단 말이지…. 우야튼 가는 도중 북해도의 파도를 본다.

By ilikeafrica
일본 삿포로 나까시마 공원

일본 삿포로 나까시마 공원

추석 기나긴 연휴 기간 다녀온 첫 일본 여행. 삿포로 시내에 호텔 잡고 5일밤을 주구장창 지낸다. 이젠 여행 스타일이 돌아다니기 보단 한곳에 오랫동안 머무르는게 일상이 되었다. 매일 짐 싸고 풀고 하는게 뭔 소용인가도 싶고, 그렇게 편히 즐기다 오는데 여행일듯하다. 처음 가본 일본. 그중에 삿포로. 눈 쌓인 겨울도 아니고, 단풍 빨간 가을도

By ilikeafrica