디시인사이드 갤러리

갤러리 이슈박스, 최근방문 갤러리

갤러리 본문 영역

에이도비야 자꾸 그리고 레디스를 언급하는게 걍 스코프가 다른거임

ㅆㅇㅆ(124.216) 2025.10.29 05:21:22
조회 107 추천 0 댓글 20

아까부터 레디스를 계에에에속 언급하는거보면


'다중 사용자' 이걸로 관점을 보는데 애초에 내 코드는 개인 사용자용임


근데 뭐가 틀리고 다른지 제대로 설명해줌


1. 벡터 DB를 인스턴스로 올리고 땡처리하는가?
->FastAPI의 lifeSpan 이벤트 핸들러를 이용해서 인스턴스 한번 생성후, 참조가 필요한곳에 필요할때마다 주입하는거임


2. 코어당 여러개 연결 있고 get해서 써야한다

->RDBMS의 커넥션 풀링인데, ChromaDB는 로컬 파일 기반 벡터 DB 클라이언트라서, 병렬 읽기 쓰레드 세이브 자동 보정임.(쓰기는 보장 안됨, 그래서 순차 쓰기 )


3.Rag 기다리는 동안 사용감이 떨어지니까 Redis 같은걸로 관리

-> RAG 결과를 캐싱하는데 Redis 쓰라고하는데, RAG 작업을 백그라운드 큐로 돌려서하는거면 모를까, 이건 단일 사용자용으로는 과도함

그냥 FastAPI기반 asyncio 정도로 충분히 비동기 처리가 가능함. 애초에 레디스 쓴다는건 대규모 스택임


4. 벡터 연결에도 스코프가 있어야한다. 그런게 없다

-> 애플리케이션 스코프가 있음. lifespan으로 관리되는 store_instance가 바로 그거임. 요청 스코프가 아니라, 애플리케이션 스코프임


5. 100개 작업 처리해달라고 하면 지금 코드로는 어떻게 하느냐?

-> 100개의 RAG는 ProcessPoolExecutor로 가능함. 자기 컨텍스트에서 새롭게 여는거고


각 병렬 작업의 DI로 동일한 store_instance 참조 받음


쓰기 작업은 지금은 필요없어서 안했고, 추후에 대화 기록을 벡터 임베딩해야하면 애초에 이걸 리듀서로 추후에 구현하면됨.


자꾸 네가 말하는 스코프는 '대규모 사용자 기반 웹 서비스'


이거고 내가 말하는건 그냥 '단일 사용자 기반 멀티 에이전트' 이 차이임.


자꾸 레디스가 나오고 이러는게 이해가 안가는게 그거고 나는 저거 서버에 올릴 생각 없어.


저건 그냥 여러 LLM API를 조합해서 하나의 골을 주면 에이전트가 조합하는거지 서버에 올리는게 아님 QT6만 봐도 답 나오잖냐


추천 비추천

0

고정닉 0

0

댓글 영역

전체 댓글 0
본문 보기

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

갤러리 리스트
번호 제목 글쓴이 작성일 조회 추천
설문 영포티룩도 멋지게 소화할 것 같은 40대 스타는? 운영자 25/10/27 - -
AD 할로윈 슈퍼위크~!! 운영자 25/10/23 - -
공지 프로그래밍 갤러리 이용 안내 [97] 운영자 20.09.28 48333 65
2899517 요즘 써보는 AI 챗봇 중에 쓸만한 거 발견한 후기(무료 팁 포함) 프갤러(1.212) 13:09 1 0
2899516 ㅆㅇㅆ가 만든 타로 사이트 고졸이 하루아침에 만드는 정도인데 ㅇㅇ(121.140) 12:42 32 2
2899515 내가 병렬 프로그래밍 때문에 피시방 가야겠다 ㅠ [1] 프갤러(222.97) 12:10 31 0
2899514 대학원 자퇴하고 싸피나 오토에버 임베디드 가는거 어케 생각? [4] 프갤러(117.111) 11:50 50 0
2899513 [두산로보틱스] 로키부트캠프 AI·로봇 엔지니어 양성과정 7기 모집 (~ 프갤러(14.32) 11:43 14 0
2899512 와 ㅋㅋ [2] 에이도비갤로그로 이동합니다. 11:25 53 0
2899511 간혹 희안한 사상을 가진 애들이 있네 [8] 루도그담당(211.184) 10:45 90 0
2899510 흠.. 컨디션 조절이 가장 힘듬 미세조정 [1] ♥벼락부자냥덩♥갤로그로 이동합니다. 10:37 28 0
2899509 자라 ㅇㅅㅇ [1] 헤르 미온느갤로그로 이동합니다. 09:31 17 0
2899508 근데 이재용도 이재명 빨다가 [1] 프갤러(175.212) 08:51 49 0
2899507 이제 우라나라도 핵잠 보유하는거냐? [1] 루도그담당(118.235) 08:45 59 0
2899506 아버지 수술하셔서 스트레스 받는데 아하 까지 날 건드려서 짜증남. 넥도리아2025(14.35) 08:41 15 0
2899505 침대 뭐삼 병원에서 쓰는 침대 에이스는 너무 비싸고, 넥도리아2025(14.35) 08:40 14 0
2899504 또 하나의 원종이가 각성했다기 보다 프갤러(175.208) 08:38 36 0
2899503 공원 ㅇㅅㅇ [1] 헤르 미온느갤로그로 이동합니다. 08:30 17 0
2899501 ㅈ됐다 또 하나의 원종이가 각성했다 프갤러(39.7) 08:28 38 0
2899500 태연 ㅇㅅㅇ 헤르 미온느갤로그로 이동합니다. 08:27 15 0
2899499 하루 한 번 헤르미온느 찬양 헤르 미온느갤로그로 이동합니다. 08:26 20 0
2899497 이런 회사도 있네 ㅇㅇ(106.101) 08:17 21 0
2899496 사실 ㅆㅇㅆ가 지금 행복한 이유도 [1] 프갤러(175.212) 08:13 48 2
2899495 ㅇ하 하지 마라 가비지컬렉터다. 사람 어이가 없어서, 아픈것도 애기 못해 넥도리아2025(14.35) 08:06 17 0
2899493 아베 총격범 오늘 첫 공판…방청객 700명 넘게 줄서 넥도리아2025(14.35) 08:02 14 0
2899491 요미코 알만한 사람은 다 탈갤했겠지? ㅇㅇ갤로그로 이동합니다. 07:17 29 0
2899490 나는조현병이야 나는내향적이야 [1] 손발이시립디다갤로그로 이동합니다. 07:07 36 0
2899488 ㅆㅇㅆ야 행복할 수 있을 때 많이 행복해둬라 [2] ㅇㅇ(51.195) 06:07 71 2
2899479 늘 생각하지만 당장 애니메이션 구현 하나 하는것도 며칠씩 걸리고 ㅆㅇㅆ(124.216) 04:44 29 0
2899475 석사 과정은 방송대 대학원으로, 박사 과정은 국립대 대학원으로 나르시갤로그로 이동합니다. 03:36 33 0
2899464 님들 저 잘건데 응원 부탁드립니다 [5] 공기역학갤로그로 이동합니다. 01:35 36 0
2899460 리눅스 설치하면 기존 파일들 날아감? [1] 프갤러(79.110) 01:01 29 0
2899454 내가 코딩 유튜버를 안믿는 이유 [5] ㅆㅇㅆ(124.216) 10.29 111 1
2899448 이번에 PHP로 된 게시판 마이그레이션 150만에 옴 [13] ㅆㅇㅆ(124.216) 10.29 93 0
2899446 그리고 개발문서만 본다고 전문가 되는거 아니다 [1] ㅇㅇ(106.101) 10.29 61 1
2899445 인생은 왜 이리 매일매일 배울게많고 즐거울까 [2] ㅆㅇㅆ(124.216) 10.29 51 0
2899444 ㅆㅇㅆ야 고생 많았따 ㅇㅇ(124.48) 10.29 73 1
2899442 좆됐다. 우주 팽창속도 감소중. [1] 프갤러(110.8) 10.29 58 0
2899441 법왜곡죄 chironpractor갤로그로 이동합니다. 10.29 25 0
2899440 오늘 2시간 동안 떠들고 4만원 받음. [2] ㅆㅇㅆ(124.216) 10.29 67 0
2899437 지피티 코드 던져주길래 이거 안돌아갈거라니까 뭔 지랄을 하는지 ㅆㅇㅆ(124.216) 10.29 42 0
2899432 갑자기 앱 2개를 다음주 말까지 만들라함. [6] 프갤러(211.234) 10.29 83 0
2899419 금값이 다시 살살 올라가네 chironpractor갤로그로 이동합니다. 10.29 35 0
2899418 웹브라우저 tts 결국 운영체제 따라가는건가 보네 [1] 프갤러(110.8) 10.29 48 0
2899414 추모 강요는 좀 ㅇㅅㅇ [2] 류류(203.229) 10.29 51 0
2899407 무안공항은 왜 추모 안함? [10] chironpractor갤로그로 이동합니다. 10.29 77 0
2899399 오 대박이네. 웹 브라우저에 tts 내장되어 있네 프갤러(27.170) 10.29 29 0
2899389 요새 불법충들 트렌드가 [3] 프갤러(121.185) 10.29 61 1
2899388 예전에 위키 프로젝트인가 그거 만든다던 사람 있던거 같은데 어케 됬음? [4] 프갤러(121.185) 10.29 47 0
2899386 트럼프 "부정선거는 개소리. 이재명은 훌륭한분" 야옹아저씨갤로그로 이동합니다. 10.29 90 0
2899385 마트에서 생굴 사왔음 오늘 저녁은 굴이다 [2] chironpractor갤로그로 이동합니다. 10.29 26 0
2899384 대학원 지원했는데 만점짜리 성적표에 놀라는군 ㅋㅋ [5] 나르시갤로그로 이동합니다. 10.29 62 1
갤러리 내부 검색
제목+내용게시물 정렬 옵션

오른쪽 컨텐츠 영역

실시간 베스트

1/8

디시미디어

디시이슈

1/2