본문 바로가기
반응형

전체 글205

[We-Co] langchain - FewShotPromptTemplate란 무엇일까! 안녕하세요. 위기의 코딩맨입니다.오늘은 RAG의 langchain프레임 워크에서 FewShotPromptTemplate에 대해서 알아보겠습니다~!요즘 RAG에 관련된 내용을 공부하고있는데 아주 재밌더라구요. [ FewShotPromptTemplate ] FewShotPromptTemplate는 간단하게 말하면 몇가지 사례를 주고, 사용자가 질의를 입력하면, 해당 사례를 기반으로 프롬프트를 구성하여 답변을 주는 것으로 보시면 됩니다.예시를 보겠습니다.질문 : "아이언맨의 실제 이름이 뭐야?"답변 : "토니 스타크" 질문 : "캡틴아메리카의 실제 이름이 뭐야?"답변 : "스티브 로저스"이런식으로 답과 질의를 생성하여 사례를 만들고 프롬프트에 적용하면"블랙위도우의 실제 이름이 뭐야??"의 질문을 하게되면 "나.. 2025. 7. 2.
[We-Co] Airflow Sensor - polling에 대해서 알아보자 안녕하세요. 위기의 코딩맨입니다.오늘은 오랜만에 Airflow 포스팅을 해보도록 하겠습니다~! 오늘은 Sensor에 대해서 공부해보도록 하겠습니다.Sensor에 대해서 공부하면 자연스럽게 따라들어오는 plolling에 대해서도 알아보도록 하겠습니다. [ Sensor ]외부 시스템(S3, DB, API), Airflow(다른 DAG, 태스크)의 특정 조건이 만족할때까지 대기하기 위한 오퍼레이터외부조건 : FileSensor, S3KeySensor, HttpSensor, SqlSensor 내부조건 : ExternalTaskSensor (다른 DAG/태스크가 성공했는지)동작 방식태스크가 워커에 할당 execute() -> poke()poke_interval 만큼 워커 슬롯 점유조건 만족시 종료 or poke.. 2025. 6. 26.
[We-Co] RAG(Retrieval-Augmented Generation) - 검색, 문서 안녕하세요. 위기의 코딩맨입니다.요즘 일과 자격증 공부로 인해 아주 바쁘게 살고있어 포스팅을 못하고 있었습니다..최근 많이 이슈가 되는 LLM의 RAG에 대해서 한번 살펴보도록 하겠습니다. [ RAG란? ]RAG는 ‘Retrieval-Augmented Generation’의 약자외부 지식(문서·DB 등)을 먼저 검색(Retrieval)텍스트를 생성(Generation)하는 기법자연어 처리 분야에서 사용되는 기술로써, 정보 검색과 생성을 결합한 모델로 보시면 될것같습니다.그래서 거의 챗봇이나 문서를 업로드해서 그 문서에 대해서 질의응답을 하는 분야에서 자주 사용됩니다. 크게 2가지 일을 한다고 보시면됩니다. 정보 검색 : 사용자에게 질문을 받고, 문서나 데이터베이스 등 답변을 찾고 결과를 LLM에 전달텍스.. 2025. 6. 25.
[Python] 이미지 얼굴인식을 해보자~! with RetinaFace 안녕하세요. 위기의 코딩맨입니다.예전에 face_recognition을 사용하여 이미지에서 얼굴 인식하는 방법에 대해서 알아봤지만,그렇게 높은 인식도를 갖고있진 않았던 것 같아서 다른 방법을 찾아보다RetinaFace를 알게되어 포스티 해보려합니다. 저의 테스트 기준 약 600개 이미지 진행 시, face_recognition은 7개의 이미지가 검출 되었지만 해당 RetinaFace로 진행 했을 시,100% 얼굴 이미지 검출이 된것을 확인했습니다. (제 데이터 셋 기준) [ RetinaFace ]먼저 해당 라이브러리를 설치해줘야합니다.코랩 기준으로 진행하고 있어서,CMD나 터미널에서 진행할 시, 방법이 다를 수 있습니다.!pip install retina-face 설치를 진행하면 Successfully을.. 2025. 2. 18.
[We-Co] 2025년 2월 기준 분야별 SOTA with paperswithcode 안녕하세요. 위기의 코딩맨입니다.오늘은 2025년 2월 기준 분야별 SOTA를 알아보도록 하겠습니다.작년에 2024년 3월 기준의 SOTA를 알아봤었는데1년 사이에 어떠한 변화가 있었을까요?! 먼저 SOTA에 대해서 궁금하시면아래 포스팅을 참고해주세요~! [We-Co] SOTA - 이것이 무엇인고!안녕하세요. 위기의 코딩맨입니다. 저번에 AI 모델 순위를 확인할 수 있는 사이트 papers with code 사용법에 대해서 소개해드렸는데요! 많이 사용되는 데이터셋의 순위, 해당 분야에서의 SOTA에 대해we-co.tistory.com 그리고 SOTA에 대한 논문이 올라오는 사이트도아래 사이트를 확인해주세요~! Papers with Code - Browse the State-of-the-Art in Mac.. 2025. 2. 12.
[We-Co] 외부 라이브러리 내부화 - 폐쇄망 Package Install with Python 안녕하세요. 위기의 코딩맨입니다.오늘은 외부 라이브러리를 내부에 설치하여폐쇄망에서도 사용하는 방법을 포스팅 해보도록 하겠습니다. [ 단계 ]리스트 확인경로 확인 및 설치테스트 진행 [ 리스트 확인 ]처음 단계는 간단합니다.가상환경을 사용하고 계시면 가상환경에 접속 후,터미널 or CMD창에서 아래 명령어를 입력해주세요.pip list 그럼 현재 설치되어있는 패키지 리스트를 확인하실 수 있습니다.다양한 버전이 설치되어있죠?! [ 경로 확인 및 설치 ]다음으로 이 많은 패키지들이 설치되어 있는 경로를 확인해봅시다.python -c "import site; print(site.getsitepackages())" 입력하게되면 아래 이미지와 같이 경로를 확인하실 수 있습니다. 이제 프로젝트 경로안에 패키지를 모아.. 2025. 2. 11.
[We-Co] Jenkins, Gitlab 연동(Docker) [3] 안녕하세요. 위기의 코딩맨입니다.이제 Jenkins, Gitlab 연동의 마지막 시간입니다. 저번 포스팅에서 둘이 연결 테스트만 진행했지만, 이번에 기본적인 파이프라인을 생성해보도록 하겠습니다. 포스팅의 [2]의 내용을 확인해보고싶으시면 아래를 확인해주세요. [We-Co] Jenkins, Gitlab 연동(Docker) with Unix [2]안녕하세요. 위기의 코딩맨입니다.gitlab과 jenkins 연동 테스트에 관한 2번째 포스팅입니다.전 포스티에서 깃랩과 젠킨스 설치를 진행했는데 이제 연동 테스트를 진행해보도록 하겠습니다. 설치we-co.tistory.com [ Jenkins, GitlLab ]Jenkins에 접속하고,왼쪽 상단에 new item(새로운 Item) 항목을 클릭해주세요. 그럼 Fre.. 2025. 2. 7.
[We-Co] Jenkins, Gitlab 연동(Docker) [2] 안녕하세요. 위기의 코딩맨입니다.gitlab과 jenkins 연동 테스트에 관한 2번째 포스팅입니다.전 포스티에서 깃랩과 젠킨스 설치를 진행했는데 이제 연동 테스트를 진행해보도록 하겠습니다. 설치 방법이 궁금하시다면 아래 포스팅을 확인해주세요~! [We-Co] Jenkins, Gitlab 연동(Docker) with Unix [1]안녕하세요. 위기의 코딩맨입니다.오늘은 젠킨스와 깃랩을 연동해보는 시간을 갖도록 하겠습니다. 버전 호환성이 중요하지만, 너무 옛날 버전을 설치하게되면 플러그인 설치에서 그만둘수 있we-co.tistory.com 단계별로 진행해보도록 하겠습니다.GitLab Access TokensJenkins Plugin InstallJenkins에서 GitLab Creadentials 등록Co.. 2025. 2. 5.
[We-Co] Jenkins, Gitlab 연동(Docker) [1] 안녕하세요. 위기의 코딩맨입니다.오늘은 젠킨스와 깃랩을 연동해보는 시간을 갖도록 하겠습니다. 버전 호환성이 중요하지만, 너무 옛날 버전을 설치하게되면 플러그인 설치에서 그만둘수 있기에최신버전을 사용해서 진행하도록하겠습니다. ㅎㅎ저는 war 파일이 아닌 도커환경을 이용하여 설치를 진행했습니다.단계별로 Gitlab, Jenkins 설치와 연동 테스트 부분으로 진행하도록 하겠습니다.[ Gitlab ]먼저 터미널(cmd)창을 열고,아래 명령어를 입력하시면깃랩의 최신버전의 이미지를 설치하게 됩니다.docker pull gitlab/gitlab-ce:latest sudo docker images 명령어를 입력하면 설치된 이미지를 확인하실 수 있습니다. 이제 생성된 이미지로 컨테이너를 생성해야합니다.hostname,.. 2025. 2. 5.
반응형

티스토리툴바