데보션앱 소개페이지 바로가기
로그인 선택

신고하기

CLOSE
신고사유 (대표 사유 1개)
상세내용 (선택)
0/200
  • 신고한 게시글은 더 이상 보이지 않습니다.
  • 이용약관과 운영정책에 따라 신고사유에 해당하는지 검토 후 조치됩니다.
  • 허위 신고인 경우, 신고자의 서비스 이용이 제한될 수 있으니 유의하시어 신중하게 신고해 주세요.
(이 회원이 작성한 모든 댓글과 커뮤니티 게시물이 보이지 않고, 알림도 오지 않습니다.)

미리보기

커뮤니티

      1,234

      badge 23.06.15

      글 등록

      카테고리를 선택해주세요.

      DEVOTEE를 활성화 시키면
      지금 작성한 커뮤니티 글에 대해 1개의 댓글을 달아줍니다.

      버튼을 누르면 글 수정 시 ChatGPT가 작성한 댓글이 수정됩니다.

      임시저장함에 저장되었습니다. 저장일시 : 2022.5.17 14:29:08

      임시저장함

      제목을 선택하시면 이어서 작성이 가능하며,
      최대 20건까지 저장합니다.
      컨텐츠 유형, 제목, 저장일시, 삭제로 이뤄진 임시저장 목록
      컨텐츠 유형 제목 저장일 삭제

      데보션 블로그 게재 요청

      CLOSE
      • *
      • *

      본인인증

      효율적인 데보션 서비스 이용 및
      고객님의 소중한 개인정보보호를 위해
      본인인증을 진행해주세요. 본인인증 미 진행 시 로그인이 제한됩니다.
      본인인증 실패

      본인인증 로그인에 실패하였습니다.
      회원이 아니시거나 본인인증 등록이
      완료되지 않은 사용자입니다.

      회원정보 연결

      AWS Claude를 활용한 Wireshark 패킷분석 부터 VoC 대응까지(5회차, Cloude는 비싸고 일단 Nova로 쓰자)

      sunaedong_Pigeon 25.10.29
      60 2 0
      DEVOTEE 요약
      소제목을 "Claude 비싸고 일단 Nova로"로 정하며, RAG(Q&A) 기반 시스템을 구축하고자 기존 모델을 개선하고 비정형 데이터를 처리하는 방향으로 전환했습니다. S3에 3GPP와 RFC 문서를 업로드하고, 이를 OpenSearch Serverless와 연동해 문서 기반 답변 생성과 학습을 지원하며, IMS registration 등의 프로세스를 규격 기반으로 반환하는 기능을 확인했습니다. 최종 목표는 pcap 파일 업로드 후 에러 분석 등의 자동화된 데이터 처리 파이프라인을 구축하는 것으로, 현재는 RAG 엔진 연결 상태이며 pcap 분석을 위해 Lambda 학습과 추가 개발이 필요합니다.
      DEVOTEE 추천 블로그

      소제목을 Claude 비싸고 일단 Nova로 쓰자고 잡았다.


      기존에 만들었던 모델은

      image.png

      이 형태의 구조인데 좀 너무 간단하고 학습될 데이터가 정형화가 되어야한다.

      대부분 pdf나 docs 파일 그리고 pcap 파일은 비정형화 파일이므로

      선회했다.


      전체적으로 만든 구성도는 아래와 같다.

      image.pngimage.png

      실제로 Bedrock 기반의 Claude 또는 Amazon Nova 을 써야하기때문에 일단

      RAG 형태로 Q&A를 할 수 있는 기반을 이렇게 꾸몄다.


      S3에는 내가 원하는 3GPP 문서 5개 그리고 RFC 문서 하나를 업로드 했고,

      이걸 Opensearch serveless 그리고 Knowledge Base와 연동을 해서

      RAG 형태로 학습을 할 수 있게 해줬다.


      그려면 Prompt 작성 후 Answer 자체는 기본적으로

      할루시네이션을 최소화를 한 문서 기반의 답변을 해준다.


      아래는 실제 test 예시이다.

      image.png

      기본적으로 알고 있는 패킷 캡처 방법에 대해서는

      Wireshark나 tcpdump 또는 SPAN포트 등을 활용하는 예시를 줬고

      pcap 파일형식이 뭐야라는 바보같은 질문은 모른다 했다.

      pcap이 pcap이지;

      image.png

      아직까지는 pcap을 읽어와서 분석하는데는 많은 시행착오가 필요하다.

      현재는 신입사원이 와서 IMS registration 절차 알려줘 정도를 하면

      이렇게 3GPP 기반으로 24.229 문서를 읽어와서 거기에서 IMS registraiton 분야에 대해서 알려준다.

      아는사람들은 알겠지만 3GPP 문서 용량이 너무 커서 이거 loading하는데 허송세월

      Ctrl+F하는데 하루종일 걸리는데 미리 학습을시켜놓으면 편하게 볼 수 있다.


      일단 현재까지 실제 Prompt를 넣어서 IMS regi와 같은 Process를 규격기반으로 Return 하는것을 확인했고

      일단 내가 그럼 하고싶었던 Error cause는 제대로 학습하는지 살펴보자

      image.png

      404 Not Found라는 Error cause를 여기에 Q&A로 넣으면 아는사람은 알지만

      4XX대 Error는 Client 에러, 5XX 에러는 Server쪽 에러다.


      이제 하고싶은거는 pcap 파일을 올려서 Error값을 분석하고 그 결과를

      여기로 던져서 상황파악을 하고 이런걸 해보고 싶은데, 일단

      pcap 파일을 학습시키려면 chunk 형태로 쪼개야 하는데 그러려면 어쩔 수 없이 또

      Lambda 학습이 필요하다.


      최종 Ending picture는 아래와 같은데

      image.png

      현재까지 만들어진건 아래와 같다.

      image.png

      RAG 엔진만 연결해놓은 상태이고 아래 PCAP처리 파이프라인과

      Lambda 트리거 그리고 pyshark/scapy 파싱과

      데이터 연동 그리고 결과해석까지 한번 쭉 만들어보자.

      image.png


      데보션사진 10월30일.jpg

      댓글 0

      DEVOTEE를 활성화 시키면
      지금 작성한 댓글에 AI가 댓글을 달아줍니다.

      sunaedong_Pigeon 님의 최신 블로그

      더보기

      DEVOTEE 추천 블로그

      동영상 기고하기