디시인사이드 갤러리

갤러리 이슈박스, 최근방문 갤러리

갤러리 본문 영역

에이도비야 자꾸 그리고 레디스를 언급하는게 걍 스코프가 다른거임

ㅆㅇㅆ(124.216) 2025.10.29 05:21:22
조회 212 추천 0 댓글 20

아까부터 레디스를 계에에에속 언급하는거보면


'다중 사용자' 이걸로 관점을 보는데 애초에 내 코드는 개인 사용자용임


근데 뭐가 틀리고 다른지 제대로 설명해줌


1. 벡터 DB를 인스턴스로 올리고 땡처리하는가?
->FastAPI의 lifeSpan 이벤트 핸들러를 이용해서 인스턴스 한번 생성후, 참조가 필요한곳에 필요할때마다 주입하는거임


2. 코어당 여러개 연결 있고 get해서 써야한다

->RDBMS의 커넥션 풀링인데, ChromaDB는 로컬 파일 기반 벡터 DB 클라이언트라서, 병렬 읽기 쓰레드 세이브 자동 보정임.(쓰기는 보장 안됨, 그래서 순차 쓰기 )


3.Rag 기다리는 동안 사용감이 떨어지니까 Redis 같은걸로 관리

-> RAG 결과를 캐싱하는데 Redis 쓰라고하는데, RAG 작업을 백그라운드 큐로 돌려서하는거면 모를까, 이건 단일 사용자용으로는 과도함

그냥 FastAPI기반 asyncio 정도로 충분히 비동기 처리가 가능함. 애초에 레디스 쓴다는건 대규모 스택임


4. 벡터 연결에도 스코프가 있어야한다. 그런게 없다

-> 애플리케이션 스코프가 있음. lifespan으로 관리되는 store_instance가 바로 그거임. 요청 스코프가 아니라, 애플리케이션 스코프임


5. 100개 작업 처리해달라고 하면 지금 코드로는 어떻게 하느냐?

-> 100개의 RAG는 ProcessPoolExecutor로 가능함. 자기 컨텍스트에서 새롭게 여는거고


각 병렬 작업의 DI로 동일한 store_instance 참조 받음


쓰기 작업은 지금은 필요없어서 안했고, 추후에 대화 기록을 벡터 임베딩해야하면 애초에 이걸 리듀서로 추후에 구현하면됨.


자꾸 네가 말하는 스코프는 '대규모 사용자 기반 웹 서비스'


이거고 내가 말하는건 그냥 '단일 사용자 기반 멀티 에이전트' 이 차이임.


자꾸 레디스가 나오고 이러는게 이해가 안가는게 그거고 나는 저거 서버에 올릴 생각 없어.


저건 그냥 여러 LLM API를 조합해서 하나의 골을 주면 에이전트가 조합하는거지 서버에 올리는게 아님 QT6만 봐도 답 나오잖냐


추천 비추천

0

고정닉 0

0

댓글 영역

전체 댓글 0
본문 보기

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

갤러리 리스트
번호 제목 글쓴이 작성일 조회 추천
설문 이제는 의미 없어진 것 같은 시상식은? 운영자 25/12/01 - -
AD 따뜻한 겨울나기! 방한용품 SALE 운영자 25/11/27 - -
2901135 근데 학교에서 하는거랑 실무랑은 좀 다르게 봐야해 이유가 뭐냐면 ㅆㅇㅆ(124.216) 11.08 122 7
2901132 교수가 자바 스윙하라고 한건 그냥 렌더러 때문일껄 [5] ㅆㅇㅆ(124.216) 11.08 202 5
2901131 자바 스윙을 교수가 너무 좋아함 [17] 프갤러(182.222) 11.08 192 2
2901130 AI가 만든 빌런 갤러 누가 있을까 [2] ㅇㅇ갤로그로 이동합니다. 11.08 121 0
2901128 국민의힘과 일기토 해서, 매일 1달에 1번 꼴로 차단당합니다. 넥도리아(14.35) 11.07 90 0
2901127 우스이 이제 조롱을 즐기는 경지에 이른듯 [1] 헬마스터갤로그로 이동합니다. 11.07 116 1
2901126 음기 충전 [3] 발명도둑잡기(118.216) 11.07 134 0
2901125 누가 나한테 20~30만짜리 의뢰좀 줬음 좋겠어 ㅆㅇㅆ(124.216) 11.07 119 5
2901124 위시캣 아니면 비싼돈을 받기가 힘든듯. 근데 위시캣은 경력위주라 ㅆㅇㅆ(124.216) 11.07 117 5
2901122 매번 학생들 앞에서 직접 차례대로 구현하기 차력쇼하니까 체력이 안남노 ㅆㅇㅆ(124.216) 11.07 117 5
2901121 사람 ㅈㄴ 많아 [8] 따당갤로그로 이동합니다. 11.07 151 0
2901120 ❤✨☀⭐⚡☘⛩나님 시작합니당⛩☘⚡⭐☀✨❤ [2] ♥KiTTY냥덩♥갤로그로 이동합니다. 11.07 116 0
2901119 나무 위키 링크했더니만 ㅋㅋ 글삭되었넬 나르시갤로그로 이동합니다. 11.07 86 0
2901118 헿헿 러빠돌이 나만 나오면 빤스런이지 ㅋㅋ 나르시갤로그로 이동합니다. 11.07 76 0
2901115 어머니 휴대폰 irecovery랑 빈곤 퇴치 앱이 깔려있다. [1] 넥도리아(119.195) 11.07 122 0
2901112 지금 학생이 웹툰작가인데 이 학생 그림으로 겜만들고싶어 [1] ㅆㅇㅆ(124.216) 11.07 162 5
2901111 요즘 억까가 심해서 갤에서 난동이나 부릴까 싶지만 [2] 프갤러(110.8) 11.07 98 0
2901109 애널은 모기 없길.. [3] ♥KiTTY냥덩♥갤로그로 이동합니다. 11.07 107 0
2901108 [1인`1개] 배달의 민족 30,000 원 짜리 쓸 사람 써 ! [1] ㅇㅇ(223.39) 11.07 93 0
2901107 살다살다 보석새끼가 제정신이란 말은 처음듣네 [2] 프갤러(110.8) 11.07 118 1
2901106 나르시 동네 친근한 아저시 같았는데 [2] 에이도비갤로그로 이동합니다. 11.07 140 0
2901105 씨발 존나 힘들어 그냥 [2] ㅆㅇㅆ(124.216) 11.07 183 6
2901104 내가 원하던거 성공했다 [4] 루도그담당(58.239) 11.07 106 0
2901102 러빨러 증세가 1년전보다 심해졌어 [16] 나르시갤로그로 이동합니다. 11.07 137 0
2901101 이 사람이 받아들이는 정보가 결국 지 지능의 한계를 못벗어난다. [5] 프갤러(223.53) 11.07 132 0
2901100 나님 청력테스트 하니까 10대 후반 나옴 ㅇㅅㅇ [1] ♥KiTTY냥덩♥갤로그로 이동합니다. 11.07 114 0
2901098 한국 프로그래머 기술 공유 ㅋㅋㅋㅋ [3] 프갤러(223.63) 11.07 177 0
2901096 내가 맨날 러스트 개쩐다 알려줘도 받아먹질 못하잖아 [6] 프갤러(223.63) 11.07 124 0
2901095 세상사는게 배구공(119.202) 11.07 123 0
2901086 프로그래밍 독학입문 해봐도 괜찮을까요.. [1] 프갤러(117.111) 11.07 92 0
2901085 배구공 = 넥도리아냐 [1] ㅇㅇ(118.235) 11.07 155 0
2901082 ㅆㅇㅆ한테 해주고 싶은말 [2] ㅇㅇ(118.235) 11.07 157 5
2901079 프갤에 고수들이 모이려면 [9] 배구공(119.202) 11.07 131 0
2901077 베네수엘라 사례를 보면 나같은 좌파라도 1찍을 할 수 없는 이유가 나온다 chironpractor갤로그로 이동합니다. 11.07 115 0
2901076 오늘은 저녁도 햄버거네 [3] 프갤러(112.169) 11.07 129 0
2901071 시발 세상이 내게 너무 많은 역할을 요구하네 [3] 프갤러(27.172) 11.07 122 0
2901069 러빨러 보면 자기 작품도 없고 전문성도 없어 ㅎㅎ [1] 나르시갤로그로 이동합니다. 11.07 103 0
2901068 솔직히 지금 하고 있는일들 다 제값 받았으면 월급 400쯤됐을텐데 ㅆㅇㅆ(124.216) 11.07 137 5
2901065 산뽀해야겠군 [6] ㅇㅇ(122.199) 11.07 110 0
2901064 근데 러빨럼들 고졸에 국비 출신들인가.. [8] 나르시갤로그로 이동합니다. 11.07 140 0
2901062 오늘은 집에서 진정한 프로그래밍을 할 수 있겠군. [4] 프갤러(218.154) 11.07 137 0
2901061 고졸 지잡 폐급이 연세대욕하고 있노 ㅋㅋ [4] ㅇㅇ(118.235) 11.07 132 6
2901060 한달 뒤 넥도리아(112.156) 11.07 78 0
2901058 강인공지능 좋아하지 말라. 님의 적이다. [6] 나르시갤로그로 이동합니다. 11.07 118 0
2901057 회사에서 1시간 놀다오는 사람들 많지? [2] ㅇㅇ(211.234) 11.07 96 0
2901056 AGI는 나르시시스트 AI로 결국은 변질되기 마련이다 나르시갤로그로 이동합니다. 11.07 65 0
2901055 AGI가 '인류에게 해악으로 작용'할 수 있는 근거 나르시갤로그로 이동합니다. 11.07 71 0
2901054 강인공지능(AGI)의 구체적인 세부 알고리즘, 특허낼까? 나르시갤로그로 이동합니다. 11.07 82 0
2901053 연세대학원 RAG 강의자료와서 보는데 교수 진짜 빡통대가리네 [2] ㅆㅇㅆ(124.216) 11.07 179 5
2901052 강인공지능 AGI 핵심 알고리즘을 2000년대 초반에 완성을 했지 ㅋㅋ [1] 나르시갤로그로 이동합니다. 11.07 84 0
갤러리 내부 검색
제목+내용게시물 정렬 옵션

오른쪽 컨텐츠 영역

실시간 베스트

1/8

디시미디어

디시이슈

1/2