Cover Image for Artificial Analysis - Korean AI Progress event, hosted by Bloom
Cover Image for Artificial Analysis - Korean AI Progress event, hosted by Bloom

Artificial Analysis - Korean AI Progress event, hosted by Bloom

Hosted by Bloom 🌸 & 3 others
Registration
Past Event
Welcome! To join the event, please register below.
About Event

​English version follows below. 영문 안내는 아래에 이어집니다.

​글로벌 AI 모델 벤치마킹 기관, Artificial Analysis가 서울에 옵니다.

​Artificial Analysis는 샌프란시스코에 있는 독립 AI 벤치마킹 기관입니다. Anthropic, OpenAI, Google, xAI, Meta, NVIDIA, Z.ai, DeepSeek, Moonshot 등 주요 글로벌 AI 랩의 모델을 같은 기준으로 측정해 Artificial Analysis Intelligence Index로 자사 웹사이트 artificialanalysis.ai에 공개하고, 엔지니어가 자신의 용도에 맞는 모델을 고를 수 있도록 돕습니다.

​특히 최근 NIPA의 독자 AI 파운데이션 모델(독파모) 사업에서 공식 독립 평가 파트너사로 선정되어, 참가 모델들을 Artificial Analysis Intelligence Index로 벤치마킹하고 결과 분석 및 공개를 지원했습니다. AI 모델의 성능을 어떻게 평가하는지, 그리고 한국 모델들이 글로벌 기업들과 비교해 어느 수준에 와 있는지에 대한 비하인드 스토리를 직접 들을 수 있는 자리입니다.

​9월 16일 저녁, Artificial Analysis 팀이 샌프란시스코에서 서울로 옵니다. 공동창업자 George Cameron 님이 화상으로 키노트를 맡고, 두 명이 현장에 함께합니다. 여기에 한국에서 직접 모델을 만드는 두 팀, SKT와 Trillion Labs가 함께 무대에 올라 각자 자기 모델을 대표합니다.


​📅 2026.09.16 (수) 19:00–21:00 KST 📍 디캠프 마포 (서울 마포구 마포대로 122 프론트원 5층) 🎟 Free · Approval-based · English


​🎙 이 자리에서 다루는 것

  • ​Artificial Analysis Intelligence Index는 무엇을 어떻게 재는가, 벤치마크 하나가 만들어지는 과정

  • ​한국 모델들은 지금 어디쯤 있는가, 독립 기관이 측정한 결과와 그 해석

  • ​모델을 만드는 팀은 자기 모델의 점수를 어떻게 읽는가

  • ​벤치마크 점수와 실제 서비스 성능 사이의 거리

​🗣 연사

  • ​George Cameron · Artificial Analysis 공동창업자 (LinkedIn)

  • ​Henry Jin · Artificial Analysis Member of Technical Staff (LinkedIn)

  • ​Emily Ros · Artificial Analysis Technical Marketing (LinkedIn)

​공동창업자인 George Cameron 님은 화상으로 키노트를 맡고, 현장에는 Member of Technical Staff와 Technical Marketing 담당자가 샌프란시스코에서 직접 오십니다.

​여기에 한국에서 직접 모델을 만드는 두 팀이 함께 무대에 섭니다.

  • ​천성준 · SKT Technical Project Manager (LinkedIn)

​SKT는 과기정통부 독자 AI 파운데이션 모델(독파모) 정예팀으로 선정되어 A.X K2를 개발하고 있습니다. 2단계 평가를 통과한 세 팀 중 하나입니다.

  • ​안홍준 · Trillion Labs Member of Technical Staff (LinkedIn)

​Trillion Labs는 한국어를 처음부터 학습시킨 Tri 시리즈를 만듭니다. 국내 최초로 700억 파라미터 모델과 학습 중간 체크포인트를 오픈소스로 공개해, 결과물만이 아니라 만들어지는 과정까지 열어둔 팀입니다.


​⚠️ 먼저 알려드립니다

​앞의 한 시간 남짓은 강연입니다. 발표를 듣고 그 자리에서 질문을 받습니다. 뒤의 오십 분은 온전히 네트워킹입니다. 샌프란시스코에서 온 Artificial Analysis 팀과 한국 AI 모델 기업 관계자들이 그 시간 내내 현장에 있습니다. 벤치마킹과 모델 평가라는 주제에 실제로 관심이 있으신 분께 권합니다.

​진행은 영어입니다. 대신 화면에 AI 실시간 번역 자막을 행사 내내 띄웁니다. 발표 슬라이드와 번역 자막이 함께 보이는 구조라 영어를 듣는 것이 편하지 않으셔도 따라오실 수 있습니다.


​🪑 프로그램

  • ​18:30 – 19:00 | 체크인, 케이터링과 음료

  • ​19:00 – 19:05 | Bloom 오프닝 (5분)

  • ​19:05 – 19:10 | Artificial Analysis 인사 · Henry Jin (5분)

  • ​19:10 – 19:40 | 키노트 · George Cameron (화상, 발표 20분 + Q&A 10분)

  • ​19:40 – 20:10 | 한국 AI 모델 기업 세션 · SKT 천성준, Trillion Labs 안홍준 (기업당 15분, 발표 10분 + 질문 5분)

  • ​20:10 – 21:00 | 네트워킹 (50분)

​시간은 대략의 흐름이고 당일 조정될 수 있습니다.

​💡 이런 분께 추천합니다

  • ​모델을 직접 학습시키거나 파인튜닝하는 엔지니어와 연구자

  • ​여러 모델 중에 무엇을 쓸지 정해야 하는 개발자와 프로덕트 담당자

  • ​한국 모델의 현재 위치를 바깥의 기준으로 확인하고 싶은 분

  • ​벤치마크 점수를 매일 들여다보지만 그게 어떻게 만들어지는지는 모르셨던 분

  • ​AI 평가와 측정 자체를 다루는 연구자와 학생


​About Artificial Analysis (Website)

​Artificial Analysis는 AI 모델과 API 제공사를 독립적으로 벤치마킹하는 기관입니다. 특정 랩에 속하지 않은 제3자로서 지능, 속도, 가격을 같은 조건에서 측정해 공개합니다. 어떤 모델을 쓸지 정해야 하는 사람들이 광고가 아니라 숫자를 보고 판단할 수 있게 하는 것이 이들이 하는 일입니다.

​한국에서는 NIPA의 독자 AI 파운데이션 모델 사업에서 공식 독립 평가 파트너를 맡아, 참가 모델들을 Artificial Analysis Intelligence Index로 벤치마킹하고 결과 공개와 분석을 지원했습니다.

​🌸 About Bloom (Website)

​Bloom은 AI 얼리어답터를 위한 커뮤니티입니다. AI 시대에 마주하는 불안(Blue)에서 함께 피어남(Bloom)으로 나아가고 싶다는 공통의 고민에서 시작됐고, AI를 먼저 써본 실무자·창업가들끼리의 대화·네트워킹·밋업을 만들고 지원하는 것을 미션으로 합니다. 4월부터 서른다섯 번 넘는 행사를 열었고, 지금까지 7,500명 이상이 밋업에 함께했습니다. 디스코드에서 함께해요.

​안내드립니다

​참가비는 무료이며, 사전 신청 후 승인제로 운영합니다. 신청서에 적어주신 내용은 승인 검토와 당일 질문 준비에 씁니다.

​현장에서 사진과 영상을 촬영합니다. 행사 기록과 홍보에 사용되며, 원하지 않으시면 당일 운영진에게 말씀해 주시면 촬영에서 제외해 드립니다.


​Artificial Analysis, a leading AI benchmarking firm, is coming to Seoul.

​Artificial Analysis is an independent AI benchmarking firm based in San Francisco. They measure models from the major global AI labs, including Anthropic, OpenAI, Google, xAI, Meta, NVIDIA, Z.ai, DeepSeek and Moonshot, on the same footing, publish the results including the Artificial Analysis Intelligence Index on their public facing website, artificialanalysis.ai, and help engineers choose the right model for their use case.

​Most recently they were selected as the official independent evaluation partner for NIPA's Korean sovereign AI foundation model program, benchmarking the participating models on the Artificial Analysis Intelligence Index and supporting the analysis and public release of the results. This evening is a chance to hear first-hand how model performance gets evaluated, and where Korean models stand next to the global players.

​On the evening of September 16, the Artificial Analysis team comes to Seoul. George Cameron, co-founder of Artificial Analysis will deliver the keynote remotely, and two of the Artificial Analysis team will be attending in person. SKT and Trillion Labs, two teams building their own models in Korea, will be on stage as well.

​What we will cover

  • ​What the Artificial Analysis Intelligence Index actually measures, and how a benchmark gets built

  • ​Where Korean models stand today, measured by an independent party

  • ​How the teams behind those models read their own scores

  • ​The distance between a benchmark number and real product performance

​Speakers

  • ​George Cameron · Co-Founder, Artificial Analysis (LinkedIn)

  • ​Henry Jin · Member of Technical Staff, Artificial Analysis (LinkedIn)

  • ​Emily Ros · Technical Marketing, Artificial Analysis (LinkedIn)

​Co-founder George Cameron will deliver the keynote remotely, while the Member of Technical Staff and the Technical Marketing lead fly in from San Francisco.

​Two teams building models in Korea join them on stage.

  • ​Sung Jun Cheon · Technical Project Manager, SKT (LinkedIn)

​SKT was selected as one of the elite teams in the Ministry of Science and ICT's sovereign AI foundation model program and is building A.X K2, one of three models through the second round of evaluation.

  • ​Hongjoon Ahn · Member of Technical Staff, Trillion Labs (LinkedIn)

​Trillion Labs builds the Tri series, trained on Korean from scratch. They were the first in Korea to open-source a 70B model along with its intermediate training checkpoints, opening up not just the result but the process behind it.

​Please note

​The first hour or so is talks, with questions taken right after each one. The remaining fifty minutes are entirely networking, with the Artificial Analysis team and the Korean model companies on the floor the whole time. It is for people genuinely interested in benchmarking and model evaluation.

​The event runs in English, with AI live translation subtitles on screen throughout. Slides and subtitles appear together, so you can follow along even if listening in English is not comfortable.

​Program

  • ​18:30 – 19:00 | Check-in, catering and drinks

  • ​19:00 – 19:05 | Bloom opening (5 min)

  • ​19:05 – 19:10 | Welcome from Artificial Analysis · Henry Jin (5 min)

  • ​19:10 – 19:40 | Keynote · George Cameron (remote, 20 min talk + 10 min Q&A)

  • ​19:40 – 20:10 | Korean AI model companies · Sung Jun Cheon (SKT), Hongjoon Ahn (Trillion Labs) (15 min each, 10 min talk + 5 min questions)

  • ​20:10 – 21:00 | Networking (50 min)

​Timings are indicative and may shift on the day.

​Who should come

  • ​Engineers and researchers who train or fine-tune models

  • ​Developers and product people who have to choose between models

  • ​Anyone who wants an outside reading on where Korean models stand

  • ​People who check benchmark scores daily but have never seen how they are made

  • ​Researchers and students working on AI evaluation itself

​About Artificial Analysis (Website)

​Artificial Analysis independently benchmarks AI models and API providers. As a third party tied to no lab, they measure intelligence, speed and price under the same conditions and publish the results, so that the people choosing a model can decide on numbers rather than marketing.

​In Korea, they served as the official independent evaluation partner for NIPA's sovereign AI foundation model program, benchmarking the participating models on the Artificial Analysis Intelligence Index and supporting the analysis and public release of the results.

​About Bloom (Website)

​Bloom is a community for AI early adopters in Korea. It started from a shared worry about the anxiety AI brings (Blue) and a wish to grow through it together (Bloom). We build and support conversations, meetups, and connections among practitioners and founders who adopted AI early. Since April we have run more than thirty events, with over 7,200 people joining. Come find us on Discord.

​Good to know

​Attendance is free and application-based. What you write in the form is used for approval review and for preparing questions on the day.

​The event will be photographed and filmed for records and promotion. If you prefer not to appear, let the staff know on the day and we will keep you out of the shots.

Location
디캠프 마포 (서울 마포구 마포대로 122 프론트원 5층)