프리미의 공간

요즘 “AI Agent”라는 말은 너무 넓게 쓰인다. ChatGPT를 사내 시스템에 붙이는 일, Dify로 업무 자동화를 만드는 일, LangGraph로 직접 에이전트를 구현하는 일, 사내 에이전트 플랫폼을 구축하는 일이 모두 같은 표현으로 불린다.그래서 “에이전트를 만들 줄 안다”는 말을 다음 5단계로 나눠볼 수 있다.1. 제품형 AI 에이전트 연동·활용제품형 AI 에이전트를 사내 업무에 안전하게 도입·연동·활용할 수 있는가ChatGPT Enterprise, Copilot, Claude Code, Amazon Q 같은 제품형 AI를 사내 시스템과 연결해 업무에 적용하는 역량이다.2. 노코드·로우코드 에이전트 빌더 활용노코드/로우코드 빌더로 업무용 agentic workflow를 빠르게 만들고 배포할 수..

https://arize.com/blog/gemini-cli-evaluation-harness/ How to add an evaluation harness to your Gemini CLI coding agentBuild an evaluation harness for your Gemini CLI coding agent with Arize Skills. Compare changes, run evaluators, and improve LLM apps with a repeatable workflow.arize.com Gemini CLI에 Arize Skills를 등록하고 사용하는 방법에 대한 설명 글.\나는 Gemini CLI 라는 에이전트의 성능을 측정하는 방법을 기대했음. 가령 웹서버에 특정 API를 구현..

https://developers.openai.com/api/docs/guides/prompt-guidance?model=gpt-5.5 Prompt guidance | OpenAI APIGPT-5.4 GPT-5.4 prompting guide New in GPT-5.4 vs GPT-5.2 Stronger long-running task performance with more reliable multi-step execution.Better control over style, tone, and structured output contracts.More disciplined tool persistence, verification loops,developers.openai.com 스스로 방법을 찾는 능력이 충..

요즘 구직활동을 하면서, 어떤 회사에 가고싶은지 진지하게 고민하고 있다. 내가 가장 중요하게 여기는 조건은 이것이다.내가 진정으로 몰입할 수 있는 환경인가? 내가 진심으로 회사의 일을 즐기며, 시간가는 줄 모르고 즐겁게 일할 수 있는 회사에 가려고 한다.그럼, 어떤 환경이 몰입할 수 있는 환경일까?1. 좋은 문제를 다룬다.회사에서 내가 좋은 문제를 다룬다면, 즐겁게 몰입할 수 있다.내가 풀려고 하는 문제가 가치있고, 누군가를 기쁘게 하거나 만족감을 주며, 풀렸을 때 임팩트가 큰 문제이고 싶다.2. 긍정적인 영향을 주고받는 동료가 있다.함께하는 동료가 긍정적이고, 인사이트를 공유하고, 농담을 하더라도 즐거운 동료가 있으면 좋겠다.염세적이기보단 긍정적이고, 마치 스포츠팀처럼 서로를 믿는 팀플레이를 이루고 싶..

관리자 페이지에서 임베딩 모델과의 연결이 실패하는 문제를 겪었다.백엔드 서버와 임베딩 서버가 모두 kubernetes 상에서 동작 중이고, 임베딩 서버의 /health 엔드포인트도 정상적으로 응답하는 상황에서 발생한 문제였다. 문제 해결 과정을 정리하였다. 증상관리자 페이지에서 임베딩 서비스의 URL로 요청을 보낼 때, Conection refused로 요처이 실패함.임베딩 서버는 k8s 상에서 정상 동작중, Pod log도 uvicorn runing on 0.0.0.0:8000 으로 로그 확인. 접근 1. kubernetes 리소스가 잘 동작중인가?우선 리소스 구성이 정상인지 확인했다. namespace 오타 여부, pod 실행 상태, service 존재 여부, Service가 실제 Pod와 연결되었는..

LLM의 출력을 얼마나 신뢰할 수 있는지, confidence를 측정하는 여러 방법이 발표되었지만, 오늘은 P(True) Calibration 방법론에 대해 소개한다.Input: [게시글 본문] Classifier: 위 글은 '정치' 카테고리로 분류되었습니다.Question: 당신의 분류가 정확합니까? (Yes/No로만 답하세요)'Yes' 토큰의 로짓과 'No' 토큰의 로짓을 각각 추출한 뒤, Softmax를 적용해 정규화된 confidence score를 계산한다. 특히 모델에게 답변의 이유(Chain-of-Thought)를 먼저 말하게 한 뒤 이 질문을 던질 때 정확도가 상승한다고 한다. ReferenceLanguage Models (Mostly) Know What They Know, Kadavat..

https://journalclub.io/episodes/performance-evaluation-of-microservices-communication-with-rest-graphql-and-grpc Performance evaluation of microservices communication with REST, GraphQL, and gRPCNow, if you’re like me: alarm bells are already ringing. These shootouts happen all the time, and in many cases the experimental design is seriously flawed. In my opinion, this paper is no exception. So ..

0. 준비물 인터넷이 없는 서버 (ubuntu 20.04, python 3.8.10) 인터넷이 있는 로컬 (ubuntu 22.04, python 3.10.12) 1. 로컬에서 파이썬 버전 맞추기 pyenv global 3.8.10 # 모든 쉘 세션에 대해 적용 python3 --version # 3.8.10 pyenv global system # 원래 파이썬 버전으로 돌아감 pyenv local 3.8.10 # 현재 디렉토리 이하에만 적용 python3 --version cat .python-version # 3.8.10 rm .python-version # 파일 삭제하면 원래대로 돌아감 2. 필요한 패키지 다운로드 pip --version # python 3.8 인지 확인 pip install --up..