Skip to content

AWS-egongz/Main

Folders and files

NameName
Last commit message
Last commit date

Latest commit

Β 

History

18 Commits
Β 
Β 
Β 
Β 
Β 
Β 
Β 
Β 
Β 
Β 

Repository files navigation

πŸ™Œ 이곡즈 ν”„λ‘œμ νŠΈ

  • μ—λΈŒλ¦¬νƒ€μž„ 챗봇 & κ°•μ˜ 검색 μ—”μ§„ μ„œλΉ„μŠ€μž…λ‹ˆλ‹€!
  • AWS 와 Elasticsearchλ₯Ό ν™œμš©ν•˜μ—¬ κ°œλ°œν•˜μ˜€μŠ΅λ‹ˆλ‹€.
  • λΉ„μ˜λ¦¬ ν”„λ‘œμ νŠΈμž…λ‹ˆλ‹€.

πŸ™Œ AWS ν™œμš©

Product in AWS: C9, EC2, Lambda, VPC

μ—λΈŒλ¦¬νƒ€μž„ 챗봇?

  • 데이터 μˆ˜μ§‘?

    μ—°μ„ΈλŒ€ν•™κ΅ 컴퓨터과학과 κ²Œμ‹œνŒ 정보듀을 μˆ˜μ§‘ν•˜μ˜€μŠ΅λ‹ˆλ‹€.
    EC2μ—μ„œ 맀일 μžμ •μ— μˆ˜μ§‘μ„ μ§„ν–‰ν–ˆμŠ΅λ‹ˆλ‹€. EC2 Turn On/Off Lambdaλ₯Ό λ§Œλ“€μ–΄ μ‚¬μš©ν–ˆμŠ΅λ‹ˆλ‹€. (λΆˆν•„μš”ν•œ μ»΄ν“¨νŒ… λΉ„μš© μ—†μ• κΈ°!) μˆ˜μ§‘ν•œ λ°μ΄ν„°λŠ” ν…μŠ€νŠΈ μž„λ² λ”© λͺ¨λΈ KR-SBERT을 거쳐 λ²‘ν„°ν™”λœ 데이터λ₯Ό μ €μž₯ν•˜μ˜€μŠ΅λ‹ˆλ‹€.

  • μ±—λ΄‡μ˜ λŒ€λ‹΅?

    기쑴의 LLM (μ±—μ§€ν”Όν‹°)에 Elasticsearch 검색을 λ”ν•œ Rag 기법을 μ‚¬μš©ν•˜μ˜€μŠ΅λ‹ˆλ‹€.
    질문 쿼리λ₯Ό λ²‘ν„°ν™”ν•œ 후에 μ†ŒμŠ€ 데이터와 μœ μ‚¬λ„λ₯Ό λΉ„κ΅ν•˜μ—¬ μƒμœ„ 10개의 데이터λ₯Ό 챗지피티에 μ£Όμ–΄ λŒ€λ‹΅μ„ μƒμ„±ν•˜μ˜€μŠ΅λ‹ˆλ‹€. μœ μ‚¬λ„λŠ” 각 λ²‘ν„°κ°„μ˜ 각도λ₯Ό κΈ°μ€€μœΌλ‘œ μΈ‘μ •ν•˜μ˜€μŠ΅λ‹ˆλ‹€.

κ°•μ˜ 검색 μ—”μ§„

  • Feature

    μ‚¬μš©μžμ˜ 쿼리가 λ³€ν•  λ•Œλ§ˆλ‹€ μ‹€μ‹œκ°„ 검색이 κ°€λŠ₯ν•©λ‹ˆλ‹€.

    μ–΄λ–»κ²Œ ? πŸ‘‰ 데이터 색인 μ‹œμ— Elasticsearch 내에 Edge-Ngram κΈ°λŠ₯을 μ‚¬μš©ν•˜μ—¬ ν† ν¬λ‚˜μ΄μ§•μ„ μ§„ν–‰ν–ˆμŠ΅λ‹ˆλ‹€.

    ν•œκ΅­μ–΄ κ°•μ˜, λ™μ˜μƒ κ°•μ˜ λ“± μ—¬λŸ¬ 쑰건으둜 필터링이 κ°€λŠ₯ν•©λ‹ˆλ‹€. (필터링 ν™•μž₯ κ°€λŠ₯)

More

  • μ„ νƒν•œ κ°•μ˜λ“€μ„ ν•œλˆˆμ— λ³Ό 수 μžˆλŠ” μ‹œκ°„ν‘œ UIλ₯Ό μ‚¬μš©ν•˜μ‹€ 수 μžˆμŠ΅λ‹ˆλ‹€.

Images

onealog onealog onealog

About

No description, website, or topics provided.

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Contributors 2

  •  
  •