디시인사이드 갤러리

갤러리 이슈박스, 최근방문 갤러리

갤러리 본문 영역

rtx5090 Flux FP16 원본모델 11초대 달성 미친AI성능

컴갤러(175.197) 2025.02.06 11:56:43
조회 148 추천 0 댓글 3
														









29b4c123e28a6bf27baed1b0479f3433c4a6952cb907ffffb64deb744af8






image size : 1024x1024 / seed:6 / steps 30 / cfg 8 / sampleur dpmpp_2m / karras / prompt + : Beautiful scenery nature glass bottle landscape, NVIDIA graphic card atmosphere, abstract dark green galaxy bottle, "RTX 5090" green text written on the bottle, text glow,






위는 RTX5090으로 flux DEV 모델의 원본(FP16) 을 구동한것으로
VRAM 사용량이 27GB가 넘어간 것을 볼 수 있다.

기존 24GB모델에서는 VRAM용량이 낮아
현실적으로  업무에서 FP16모델을 사용할 수 없으며

사용하더라도, OFFLOAD 로 인해 시스템RAM으로 데이터가 넘어가버려서
측정이 의미 없을 정도로 잡 로딩이 엄청나게 느려지게 되는데

이런 현상 조차도 시스템 RAM이 80gb이상 있을때나, 겨우 느껴볼 수있는 느려짐 현상이지

64gb이하 인 경우는 아예 먹통이라  ,"이거 원래 구동 안 되요" 라고 알고있는 사람이 상당히 많음




사실 너무 당연한듯이 FP8 양자화모델만 쓰고있어서
FP16모델을 써본적 조차 없는 사람들이 대부분이다.


그로인해. 위 레딧에서는 FP16모델을 사용하여 VRAM이 27gb가 넘어간 것을 인증했고
사실상 개인 유저들에겐 완전히 구름위 신세계에서 노는거라
현실적으로 비교대상조차 없는것이다. 
 L40 A40 A100 유저들 기준으로도 GPU성능이 너무 많이 차이나서 비교 대상이 되지 못한다


하지만 바로 아랫댓글을 보면

FP8 모델을 로드해놓고 자기랑 2배 차이 밖에 안 난다고 위안하는 모습을 볼 수 있는데

바로 대댓글에 3090에선 FP16모델을 로드 할 수 없기 때문에 동일한 설정이 아니라고 다시 댓글이 달린다


실제로는 시스템 메모리를 80gb이상 확보한 뒤 vram도 싹 비우면3090에서도 fp16이 로드가 가능하지만

현실적으로 각종 사전,사후 로딩이 너무 엄청나서,  실무에서의 속도는 5090과 비교 자체가 안된다.


그렇기 때문에 애초에 5090과는 비교를 할 수 있는 시스템이 아니라고 단정지을 수 있는것이다


FP8에서 구동시

FP16대비 시간은 보통 60%대로 단축되며
즉 5090의 FP8성능은 3090의 3배 이상에 달하는것이다.
이건 뭐 4090과의 비교에서도 이미 검증된 내용임


그리고 더욱 관건인 부분은 FP4가 포함된 모델의 경우인데.
FP4를 적절히 섞은 모델이 나올경우 깡성능으로
3090의 10배이상의 성능을 낼것이 확정적이며 "FP4만" 적용하면 성능은 거의 20배에 달한다

4090과의 FP4깡성능은 4.5배 차이로 알려져있으며

FP4를 일부만 적용하더라도 2배~2.5배정도의 차이는 예상해볼 수 있다.

그러므로 깡성능에서 5090의 가치는 4090의 2.5배 정도의 가치이며

VRAM의 특권에서도 2배이상의 가치를 가지게 되어

총합적으로 2.5~3배 정도의 가치를 가지게되며

4090의 가격이 280이라고 치면

5090은 550~1000만원 범위로 환산되는것이다.
(게임성능은 고작 1.3~1.4배지만 게임은 이제 아무런 의미가 없는 지표임)
그러므로 향후 시세를 정확하게 예측가능하며

이 모든 시세를  낮출 수 있는 새로운 제품 또한 nvidia제품이며

이걸 할 수 있는  사람 또한 황회장뿐이다.




















추천 비추천

0

고정닉 0

0

원본 첨부파일 1

댓글 영역

전체 댓글 0
등록순정렬 기준선택
본문 보기

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

갤러리 리스트
번호 제목 글쓴이 작성일 조회 추천
설문 잘못하면 바로 인정하고 사과할 것 같은 스타는? 운영자 25/04/07 - -
공지 컴퓨터 본체 갤러리 이용 안내 [164] 운영자 22.12.13 85939 137
5621915 일본이 산업 로봇에 강한 이유가 뭐냐 dd(118.235) 09:17 2 1
5621914 원컴 방송으로 종겜 생각하면 5090이 맞음? 컴갤러(61.74) 09:16 1 0
5621913 아니 cpu 초고수있냐? E코어 관련 [1] ㅇㅇ(218.153) 09:16 5 0
5621912 백수 새끼들 반에 용팔이 새끼들 반 반반 이노 [2] 외대오빠원나잇지존(14.6) 09:15 11 0
5621911 fhd환경에서 프레임 ㅈㄴ 떨어져도 [3] 컴갤러(175.214) 09:14 18 0
5621910 7700xt 언더 볼팅해서 사용해도 ㄱㅊ? [5] 컴갤러(175.193) 09:14 21 0
5621909 미국은 나사하나 제조 안하는 나라엿네 [4] ㅇㅇ(121.168) 09:13 33 0
5621908 라이젠5600 RX6600 중고품 40만원대 ㄱㅊ? [14] ㅇㅇ(118.235) 09:13 20 0
5621907 9950x3d도 거르는게 맞겠지?? [7] 컴갤러(175.214) 09:11 33 0
5621906 9600x 내장그래픽으로 롤 하니까 핑 100까지 튀는데, [13] ㅇㅇ(106.102) 09:11 47 0
5621905 Say~ hi 컴붕이들아 ㅋㅋㅋ [2] ㅇㅇ(218.153) 09:10 23 0
5621904 이번달은 전자기기 게임 안사야지 [3] 컴갤러(220.90) 09:10 19 0
5621902 컴퓨터 구매 시기 알려준다 [5] 컴갤러(124.5) 09:09 49 0
5621901 난 어딜가나 갑의위치에 있어야 안심되더라 [5] ㅇㅇ갤로그로 이동합니다. 09:09 36 1
5621900 983d 24년꺼는 그냥 거르는 게 맞는듯 [3] 컴갤러(211.169) 09:08 48 1
5621899 대체 컴 부품에 LED다는건 어떤 새끼들 대가리에서 나왔을까 [2] ㅇㅇ갤로그로 이동합니다. 09:08 35 0
5621898 황회장보니까 독과점 횡포 [1] 컴갤러(218.51) 09:08 26 0
5621897 견적 평가 좀 [3] 컴갤러(61.97) 09:07 30 0
5621896 월요일 아침부터 디시갤러러 쳐다보고 있으면 [3] 컴갤러(1.226) 09:07 23 2
5621895 삼성전자는 창의력이란게 없는거냐? [2] ㅇㅇ(118.235) 09:07 36 0
5621894 850w 1000w 뭐가낫냐? [7] 컴갤러(211.203) 09:07 33 0
5621893 환율 1500 을 향해 달려가네 [2] 컴갤러(1.231) 09:06 50 1
5621892 야발났다 애들아 지금 ㅋㅋㅋㅋㅋ [3] ㅇㅇ(106.101) 09:04 62 1
5621891 5070ti vs 5080 질문있습니다 선생님들! [3] ㅇㅇ(211.208) 09:04 21 0
5621890 ㄹㅇ 휴대폰은 아이폰인듯 [2] 컴갤러(175.214) 09:02 36 1
5621889 너무 오래일했다. [2] ㅇㅇ갤로그로 이동합니다. 09:02 53 0
5621888 14400 온도 질문 [7] 컴갤러(116.33) 09:01 31 0
5621887 삼성전자가 이래서 애플을 못이긴다 [1] ㅇㅇ(118.235) 09:00 36 1
5621886 갤러헤드 짭수 AS받을수 있음? [9] ㅇㅇ갤로그로 이동합니다. 09:00 32 0
5621885 당신은 3초 조루인가? [2] 컴갤러(1.226) 08:59 31 2
5621884 만약에 5080 s 혹은 ti 나오면 질문 [1] ㅇㅇ갤로그로 이동합니다. 08:59 35 0
5621883 성공하려고 상경했다가 [3] ㅇㅇ갤로그로 이동합니다. 08:59 46 0
5621882 컴터고수님들 500견적좀 [3] 오사카호랑이(126.205) 08:59 31 0
5621880 983d 직구했는데 걍 다시팔까? [11] 컴갤러(211.203) 08:58 69 0
5621879 5090호프 디자인 달라지려나?? [1] 컴갤러(175.214) 08:58 23 0
5621878 5090호프는 개젖같은디자인이 아닐가능성이 높다 [1] 먀나르갤로그로 이동합니다. 08:57 48 0
5621877 인도 남자들은 왜 외국 여성 관광객만 보면 집단으로 단체로 [4] 컴갤러(1.226) 08:56 45 1
5621876 1.4kg 랑 1.25kg 랑 체감 가능하냐? [11] 컴갤러(211.55) 08:56 39 0
5621875 여자의 일방적인 자백 진술만으로 무고한 남자를 성범죄자로 단정짓는건 [1] 컴갤러(1.226) 08:55 20 1
5621874 난 10년뒤에 5090사야지 [4] 컴갤러(121.173) 08:55 36 0
5621873 애즈락 이슈라는게 [6] ㅇㅇ(118.235) 08:55 44 0
5621872 삼성전자 갤럭시는 애플 작품이라고 봐도됨 [5] ㅇㅇ(118.235) 08:54 55 1
5621871 진짜 1년 존버하다 화이트 아스트랄도 나오겠네 ㅋㅋㅋㅋ [2] 컴갤러(175.214) 08:54 32 0
5621869 애미뒤진 용팔이한테 호구 잡혔다 도와줘라 [7] ㅇㅇ(211.196) 08:53 49 0
5621868 i7 12700k 정도면 날라댕기지 어 [3] 컴갤러(1.226) 08:53 29 1
5621867 스트리머가 광고하는 업체는 그냥 후려치기네 [1] ㅇㅇ갤로그로 이동합니다. 08:53 19 0
5621866 무단외출까지 간섭하는건 좀 아니지않나? [4] 컴갤러(1.226) 08:52 36 0
5621865 삼성 갤럭시 쓰는 사람들이 지능이 평균이하인 팩트 [2] ㅇㅇ(118.235) 08:51 43 2
5621863 남자 자페아 색히들은 엄마도 강간해버리는 특성이 강함 [5] 컴갤러(1.226) 08:49 56 1
뉴스 재료값만 100만원…신종철, 이승철 위한 도시락 공개 (‘사당귀’) 디시트렌드 04.06
갤러리 내부 검색
제목+내용게시물 정렬 옵션

오른쪽 컨텐츠 영역

실시간 베스트

1/8

뉴스

디시미디어

디시이슈

1/2