갤러리 이슈박스, 최근방문 갤러리
연관 갤러리
LGBT 갤러리 타 갤러리(0)
이 갤러리가 연관 갤러리로 추가한 갤러리
추가한 갤러리가 없습니다.
0/0
타 갤러리 LGBT 갤러리(0)
이 갤러리를 연관 갤러리로 추가한 갤러리
0/0
개념글 리스트
1/3
- 싱글벙글 폭설때 캠핑간 누나 ㅇㅇ
- 망한 카페 사장들의 자조 ㅇㅇ
- 싱글벙글 전화공포증.jpg 최강한화이글스
- 홍진호 10화 JOAT 장면 ㅇㅇ
- (장문) 구로다의 인생 글쟁
- 싱글벙글 아침 식사 꼭 챙겨야 할까촌.jpg 최강한화이글스
- 뒤늦게 올리는 노들섬의 가을 풍경 보고 가주세요 제발! 윤더거
- 싱글벙글 정찰위성 3호기 발사 성공 왕여신
- 싱글벙글 영어 못하는 사람이 미국가면 생기는 일 ㅇㅇ
- 유럽가서찍은거 Bar야흐로
- 미군 포로가 작성한 편지를 토대로 행적 찾기 투하체프
- 필통을 만들었어요 독고뿡
- 씹덕씹덕 일본 버튜버 휴방촌...jpg 장애인
- 배우가 이렇게 말하면 그 영화 봐주고 싶어짐 ㅇㅇ
- 9남매 중 유일하게 노란색으로 태어난 강아지 ㅇㅇ
오늘 o3-mini 시연으로 보여준 것
1. o3-mini(hard)에게 mac에서 o3-mini API를 사용해서 코드를 생성하고 바로 실행하는 프로그램을 UI와 함께 만들라고 지시다음과 같은 내용에 대한 Python 스크립트를 작성해주세요:HTML 파일을 로컬에서 서버로 실행하는 스크립트가 필요합니다. 이 HTML 파일에는 큰 텍스트 상자가 있어야 합니다. 텍스트 상자에 내용을 입력하고 제출 버튼을 누르면:-해당 요청을 OpenAI의 o3-mini API로 전송해야 하며, medium reasoning_effort 설정을 사용합니다-API로부터 받은 코드를 데스크톱의 임시 파일로 저장합니다-새로운 파이썬 터미널에서 그 파일을 실행합니다추가 세부사항:-API 키는 ~/api_key 위치에서 찾을 수 있습니다-API 요청 시 원시 코드만 반환하고 포매팅이나 마크다운을 전혀 포함하지 않도록 추가 프롬프팅을 넣어주세요-Mac 노트북에서 실행될 예정입니다2. 그렇게 해서 만든 코드3. 3. o3-mini(hard)가 직접 만든 터미널이제 저기에 아무거나 입력하고 submit을 누르면o3-mini(medium) API를 통해 코드를 생성하고,생성된 코드를 임시파일로 저장하고,임시파일로 저장된 코드를 파이썬으로 실행하는 것 까지 수행프롬프트에는 위처럼 간단하게 openai를 프린트하고 아무 숫자나 프린트하라고 시킴4. 실행 결과openai 41 이라고 결과가 나온 모습(즉, o3-mini API로 프롬프트를 보내서 코드를 짰고, 그 코드의 실행 결과가 openai 41이 된 것)5. 이제 좀 더 난이도를 높여서, o3-mini에게 너 자신의 GPQA 점수를 직접 평가하라는 프롬프트를 만듬-특정 url로 들어가서 평가 데이터셋을 다운 받고, API 사용방법에 따라 제대로 코드를 짜야하고,다운받은 데이터셋을 o3-mini(low) API로 보내서 결과를 얻고,나온 결과를 Answer: 형태로 깔끔하게 나오게 해서 평가가 가능할 수 있게 해야함그리고 async를 사용해서 병렬처리가 가능하게 하고, api 콜이 실패하지 않도록 robust하게 만들어야함등의 지시 사항이 담김6. 그렇게 해서 나온 결과61.62%라고 점수가 바로 계산됨자기 자신이 스스로를 원큐에 평가한 것 7. 그 뒤에 멘트들"내년에는 모델에게 너 자신을 개선해라 라고 명령해봐야겠네요"이 과정이 라이브에서 찐빠없이 이루어진게 개인적으론 매우 놀라웠음o3-mini가 이정도면 o3는 그냥 말이 안되는 수준일듯- o3 벤치마크가 가지는 의미Codeforces, FrontierMath, GPQA 하나같이 다 인간 최상위권들 수준의 문제들임어느 정도일까?Codeforces : 코딩 고인물들만 참가하는 대회여기서 99832명 중 50위 내, 즉 상위 0.05% 달성보통 Candidate Master만 되도 인간 최상위권인데, 그 중에서만 따져도 0.7% 내에 들음ELO 2500점만 되도 국제올림피아드 진출권이라는 걸 생각하면, 보통 인생 살면서 이 정도로 코딩 잘하는 사람은 보기도 힘듬AIME(미국 수학 올림피아드) 96.7%, GPQA (박사 수준 추론 질문) 87.7%웬만한 사람은 아무리 공부해도 이 정도에 도달하는 건 불가능참고로 GPQA는 해당 분야 박사 학위도 평균 65%의 정답률을 보임FrontierMath : 대놓고 현존하는(했던) 인공지능들 엿먹이려고 만든 수학 벤치마크수학 평생 공부하면서 박사까지 전공한 사람들도 자기 분야랑 딱 맞는 거 아니면 못 푸는 문제들만 있음공식 사이트(https://epoch.ai/frontiermath)에 있는 언급 : Terence Tao : 이 문제들 ㅈㄴ 어려움. AI가 이거 풀려면 적어도 몇 년 걸릴 듯 Timothy Gowers(필즈 메달 수상자) : 이거 다 푸는 건 고사하고, 한 문제 제대로 푸는 것도 우리가 지금 할 수 있는 걸 넘어선다 Evan Chen (국제수학올림피아드 코치) : 정말로 어려운 문제들이고, 대부분 내 능력을 뛰어넘는다ARC-AGI (일반 추론 평가) : 진짜 인간다운 추론을 하는지 테스트하기 위해 만든 데이터셋일반적인 사람이 풀었을 때 85% 정도의 정답률을 보임o3는 여기서 생각 시간에 따라 76%-87%의 정답률을 보임걍 기존 벤치딸들과는 차원이 다른 수준임GPQA, FrontierMath, ARC-AGI 얘네들은 전체 문제는 비공개고 예시를 위한 일부 문제만 공개돼있기 때문에,벤치 미리 학습했네 이 ㅈㄹ도 못함- 오늘 발표에서 가장 놀라웠던 부분. NO.1사진을 보면 알다시피 o3는 코드포스에서 2727점을 기록.“o3는 최고 세팅에서 거의 2727과 같은 결과를 얻을 수 있었습니다.”“샘: 아주 좋습니다. 당신(가운데 앉아있는 엔지니어 마크 첸)의 기록은 어떻습니까? 마크 첸: 저의 최고 점수는 약 2500이었습니다.”• “우리의 수석 과학자도 이 점수를 넘지 못했는데, 이 점수는 수석 과학자 야코프의 점수를 능가합니다.”아마 한 명이 더 높은 점수를 낸 것 같습니다.” “점수는 아마 OpenAI에서 3000점을 유지하는 사람이 한 명 있는 것 같아요.”“그 점수도 몇 달 더 지나면 가능할 것 같아요.”이번에 o3가 코드포스에서 2727점을 기록했으며,가운데 앉아있는 초엘리트급 엔지니어 마크 첸(자긴 2500점대라 주장함), 심지어 일리야 후임인 야코브(현 OpenAi 수석과학자 아래 인물)마저 뛰어넘고 유일하게 오픈AI 내에서 3000점 이상인 사람이 딱 한명만 존재함…ㄷㄷㄷ“FEEl THE AGI.”- [OpenAI] 방금 역사상 가장 똑똑한 AI가 탄생하였음어제부터 시작된 심상치 않은 분위기그리고 갑자기 The Information 기사가 하나 올라오는데...그리고 약속의, 새벽 3시.담담하게 발표하는 그들..."O3 모델은 아주 아주 똑똑한 모델입니다. 그리고 O3 Mini 모델도 믿을 수 없을 정도로 똑똑한 모델이에요."----------SWE-bench Verified (Software Engineering):실제 GitHub 이슈를 바탕으로 하여, 코드베이스를 수정하여 문제를 해결할 수 있는지를 평가. 소프트웨어 개발자로서 충분히 생산적인지를 확인.Codeforces (Competition Code):프로그래밍 경쟁 대회. 다양한 난이도의 알고리즘 문제를 해결하는 능력을 평가. 다양한 알고리즘 문제를 효과적으로 해결할 수 있는지를 확인.모두 0-shotsGithub 이슈, 실제 프로덕트에 대한 실질적인 해결 능력이 71%까지 올라갔다는 것을 의미함과 동시에,전세계 상위 0.2% 국제적인 그랜드마스터급 실력(정확히는 전세계 175위)의 알고리즘 문제 해결 능력을 보유했다는 것을 의미.AIME 2024 (Competition Math):중고등학생 수학 경시 대회. 기하학, 조합론, 정수론, 대수학 등 다양한 분야에서 창의적이고도 고도의 논리력과 사고력을 요구하는 문제들로 구성되며, 여기서 만점을 받는다는 것은 영재 중의 영재이자 추후 수학의 신계가 될 자들만이 가능함. 애초에 응시하는 것부터가 AMC라는 대회에서 상위 5% 미만이어야지만 응시 가능.Questions (GPQA Diamond) (Phd-level Science):박사 수준의 생물학, 물리학, 화학 문제를 해결하는 능력을 평가. 해당 분야의 박사들조차 평균 65%의 정답률밖에 달성하지 못함.해당 부문들에 있어서 대략적으로 인간 전문가를 한참 뛰어넘었다고 볼 수 있겠다.EpochAI Frontier Math (Research Math):60명 이상의 최고급 수학자들이 참여하여 만든 역대급 수학 문제들. 14명의 국제수학올림피아드 금메달리스트와 필즈상 수상자들(테렌스 타오, 티모시 고워스, 리처드 보처드)이 머리를 싸매고 만든 수학 시험. 전문 수학자도 딱 한 문제 해결에 수 시간부터 수 일이 소요. 단순한 패턴 매칭이나 기존 학습 데이터만으로는 해결할 수 없는 진정한 수학적 추론 능력을 측정.기존의 모든 AI들은 2.0%의 수준밖에 안 되었는데, o3는 25.2%까지 끌어올렸다.ARC-AGI:일반인공지능(AGI)의 핵심인 추상화와 추론 능력을 측정하는 테스트. 단순한 패턴 매칭이나 통계적 학습이 아닌, 진정한 지능을 측정하고자 설계.인간 평균 수준은 70%.ARC Prize 창립자왈:"OpenAI의 o3 모델은 ARC-AGI 벤치마크에서 뛰어난 성능을 보여주며, 기존 LLM의 한계를 극복하고 지식 재조합 능력을 향상시켰습니다. 이는 단순한 성능 향상을 넘어, AI가 새로운 과제에 적응하는 능력이 크게 발전했음을 보여줍니다. ARC Prize는 새로운 벤치마크를 통해 AI 연구 발전을 계속해서 추진할 것입니다."나머지Structured Outputs:개발자가 제공한 스키마에 따라 출력을 정확하게 구조화하는 능력. JSON, 데이터베이스, 자동화된 처리 등에 적합한 일관된 형식의 출력을 보장.Function Calling:외부 도구나 API와 상호작용할 수 있게 해주는 능력. 텍스트 생성을 넘어 실제 작업을 수행하고 데이터를 검색 및 처리할 수 있음.Function Calling with Structured Outputs:Function Calling과 Structured Outputs을 결합한 고급 능력.LiveBench Coding:다양한 코딩 능력 평가 시험. 문제 이해 능력, 기존 코드 기능 파악, 누락된 부분 완성 능력 등을 다양한 문제들로부터 평가.https://youtu.be/SKBG1sqdyIU
작성자 : ㅇㅇ고정닉
첫혼여 도쿄 7박8일 여행기 -1 [우에노박물관](스압ㅈㅅ)
6월에 다녀왔는데 재밌어가지고 다시가고 싶었다 친구가 특가항공권 알려줘서 12월로 바로 예약했다. 그런데 일정맞는 애들이 없어서 처음으로 혼자 여행간다.출국 2일전에야 도쿄->하코네->가마쿠라,에노시마, 요코하마->도쿄로 일정을 확정했다.첫째날7시30분 비행기. 공항철도 첫차가 6시라서 시간을 못 맞출것 같았다. 그래서 택시탐. 이럴 줄 알았으면 공항에서 밤샐걸 그랬다.도착하자마자 체크인하고 탑승구갔다. 아침 먹고가려고 했는데 문연곳이 한군데도 없었다. 근데 탑승구 옆에 롯데리아가 열었다. 바로 핫크리스피버거 먹었다. '킹데리아' 카페같은데서 비싼 샌드위치 사먹을뻔했다.나리타 도착 미세먼지가 많았다. 스카이 라이너 타는 곳에서 반겨주는 오타니 형님.. 여행중에 오타니를 자주 봤다. 이제야 일본인게 느껴졌다.숙소는 토요코인, 추천하는 이유가 있구나 싶었다. 침대도 생각보다 크고, 방도 깨끗하고 깔끔했다. 다른 비즈니스 호텔 박당 12만원 넘어갈때 학생할인 받으니 박당 7만원에 가능했다. 조식까지 나온다. 가성비 갑이다.짐을 맡겨두고 우에노 공원으로 향했다. 6월에 우에노 동물원을 가봤는데 좋았어서, 나머지 우에노 공원 컨텐츠인 과학박물관, 서양미술관도 보고싶었다.지난 여행때 못가본 돈카츠 만푸쿠에 갔다. 로스카츠 정식. 가격은 1800엔 돈까스안에 수육이 들어있는 느낌 이었다. 육즙이 풍부했고, 조금 기름져서 소스를 많이 뿌려 먹었다. 그래도 맛있었다. 회사원 아저씨들이 줄 서있다, 가게도 좁고 등받이도 없어서 불편하다. 이건 감안해야 할 것 같다.3일인데도 트리가 있었다. 벌써부터 크리스마스 분위기를 내는구나. 그 옆에는 여러 음식들을 파는 상점들이 줄서있다.오귀스트 로댕의 지옥의 문 - 로댕하면 생각하는 사람을 떠올리는데 지옥의문이 더 예술사적으로 중요하댄다.생각하는 사람. 계속 사람들이 앞에서 사진을 찍고 있었다. 나도 사진을 찍고 싶었지만 혼자여서 못 찍었다. 서양미술관에선 줄이 엄청 길었다. 미술에 관심이없어서 서양미술관은 포기. 과학 박물관으로 향했다.과학박물관 입구에서 반겨주는 대왕 고래. 사실 과학박물관을 일정에 넣은 이유는 일일외출록 이라는 만화를 재밌게 봤기 때문이다. 빚진놈들이 지하탄광에 같혀서 빚갚는건데, 외출권을 사가지고 온게 박물관이다. 그런데 그게 재밌어보였다. 그래서 나도감ㅋ. 입장권은 630엔.킹룡 1대왕오징어, 위에 조그만한게 우리가 아는 일반오징어.짱룡 2.ㅈ냥이. 이정도크기면 내가 이길것같은데? 하고 찍어봤다. 회색곰. 그리즐리베어 애는 보자마자 위압감이 장난 아니었다. 앞에서보면 깝치면 뒤진다는게 이런거구나 느껴진다. 과학박물관을 나오는데 우산 락커가 있었다. 일본은 우산 도난이 많아서 이렇구나. 신기해서 찍었다.그대로 나가려는데 특별 전시회 '새' 를 진행중 이었다. 이건 못참지하고 갔다. 입장권이 2200엔이다. 비싸지만 박물관 입장권이 있으면 600엔 할인된다. 1600엔, 고등학생 이하 학생은 600엔이다. 날개가 한짝식 있다. 잔인하다고 느끼면서 동시에 예쁘다고도 느꼈다.독수리? 로 보이는 털, 부위별로 깃털을 모아놨다.펭귄. 다리가 꽤길다. 독수리들. 다보고서 나오니까 다시 반겨주는 대왕고래 과학박물관은 1시간 50분정도, 새 전시는 20분정도 걸렸다. 수많은 설명이 있는데 이해를 못하니까 아쉬웠다. 그렇다고 파파고 쓰기엔 너무 많다. 일본어가 되면 그만큼 만족감이 높을 것 같다. 설명 없이 보는것도 좋았으니까. 새 전시는 새를 좋아하거나, 일본어가 된다면 추천한다. 25년 2월 까지 한다.체크인하고 어깨가 너무아파서 저녁까지 누워있었다. 그래도 여행 왔는데 뭐라도 하자 하면서 숙소 근처 라멘집을 갔다.기본라멘에, 면을 두가지 중에 고를 수 있는데 말을 잘 못 알아 들었다. 오스스메 구다사이(추천해주세요) 하고 먹었다.면 자체가 되게 끈적?한 느낌이었다. 국물도 걸쭉하고 짭짤했다. 계란이랑 갈색 우엉조림? 이 되게 맛있었다. 가격은 900엔 라멘 나가야마밥먹고 산책하다 기차사진.숙소로 돌아가는길 공중 전화기.일본에서 제일좋아하는 떡 아이스크림 한국에서도 먹을수 있으면 좋겠다. 아이스크림이 냉동칸?에 안들어가서 2연속으로 먹었다. (이러면 안됐다)혼자 여행이라 긴장이랑, 걱정 많이했다. 그래도 파파고, 구글맵, 챗gpt 만 있으면 어떻게든 해결할 수 있었다.다만 도구에 의존하지 말고 회화도 하고, 문화도 잘 알았으면 좋았겠다는 아쉬움이 들었다. 그래도 걱정보단 잘했다.
작성자 : 배고파앙고정닉
차단하기
설정을 통해 게시물을 걸러서 볼 수 있습니다.
댓글 영역
획득법
① NFT 발행
작성한 게시물을 NFT로 발행하면 일주일 동안 사용할 수 있습니다. (최초 1회)
② NFT 구매
다른 이용자의 NFT를 구매하면 한 달 동안 사용할 수 있습니다. (구매 시마다 갱신)
사용법
디시콘에서지갑연결시 바로 사용 가능합니다.