꿈꾸는공학도

https://eglife.tistory.com/373 [논문작업] SQL2NL for NL2SQL (2)https://eglife.tistory.com/372 [논문작업] SQL2NL for NL2SQL (1)너무 놀았다.. 이제는 피할 수가 없는 졸논작업 박사에 비하면 큰 관심이 없는 게 석사논문이기도 하고,, 사실 내가 경력채용으로 가려고 하는eglife.tistory.com 우당탕탕 Llama3.2 3b Base로 이런저런 실험은 끝냈다. 이제는 데이터추출 / 실험은 그만하고, 논문 Writing 작업을 실시할 때인데... 의외로 Rule-based SQL2NL을 했던 data를 finetuning한 Model이 NL2SQL 성능이 좋았다. 물론, 한정된 Data수량 / 다양한 LLM으로 시도해보..

지금껏 LLM base로 SQL2NL을 진행했다. 그러다보니 사실 NL2SQL과 유사하게 Task를 진행하느라 그닥 Novelty는 없었다. 그러다금껏 LLM base로 SQL2NL을 진행했다. 그러다보니 사실 NL2SQL과 유사하게 Task를 진행하느라 그닥 Novelty는 없었다. 그러다 SQL-to-Vector Embedding이라는 개념을 새로 도입해 Task를 실행했고 결과는 나쁘지 않았다.https://eglife.tistory.com/370 [KDBC] SQL2NL 모델 발전시키https://eglife.tistory.com/369 SQL2NL 모델을 NL2SQL에 적용시켜보기[3 - 잠정 stop]https://eglife.tistory.com/368 SQL2NL 모델을 NL2SQL에 ..

https://eglife.tistory.com/368 SQL2NL 모델을 NL2SQL에 적용시켜보기[2]https://eglife.tistory.com/367 SQL2NL 모델을 NL2SQL에 적용시켜보기[1]일단, 이번 글과 관련된 나의 고뇌는 아래와 같다. https://eglife.tistory.com/366 SQL2NL 모델 추가 실험(VectorDB, Embedding)[4]https://eglife.tistory.com/3eglife.tistory.com 얼른 접합시켜보자 이것들!!!!!!!!!! 그리고 평가 Data 걍 만들기. Human Based Survey 그냥 만들어서 랩실사람들한테 얼렁 평가받자!![ROW] case=0, strat=Random -> {'id': '0', 'db_i..

https://eglife.tistory.com/364 SQL2NL 모델 추가 실험(VectorDB, Embedding)[3]https://eglife.tistory.com/363 SQL2NL 모델 추가 실험(VectorDB, Embedding)[2]https://eglife.tistory.com/362 SQL2NL 모델 추가 실험(VectorDB, Embedding)[1]https://eglife.tistory.com/361 SQL2NL 모델 실험진행(2)https://eglife.tistory.com/360 Seglife.tistory.comData는 웬만큼 뽑았다. 이제 실험한 Data에서 유의미한 내용을 뽑고 잘 시각화하는 것이 중요할듯. BAR / Line Graph로 각 Prompt Case ..

https://eglife.tistory.com/363 SQL2NL 모델 추가 실험(VectorDB, Embedding)[2]https://eglife.tistory.com/362 SQL2NL 모델 추가 실험(VectorDB, Embedding)[1]https://eglife.tistory.com/361 SQL2NL 모델 실험진행(2)https://eglife.tistory.com/360 SQL2NL 모델 실험진행https://eglife.tistory.com/359 SQL2NL 모델 개선방안eglife.tistory.com이제 Embedding 추가하는 건 여기서 Stop하고 Embedding한 모델이 적절히 쓸만한지, Test를 진행해봐야 한다. Test case를 어떻게 나눠야 할까? 그 전에 이 ..

https://eglife.tistory.com/362 SQL2NL 모델 추가 실험(VectorDB, Embedding)[1]https://eglife.tistory.com/361 SQL2NL 모델 실험진행(2)https://eglife.tistory.com/360 SQL2NL 모델 실험진행https://eglife.tistory.com/359 SQL2NL 모델 개선방안에 대한 검토 - Prompt & RAGhttps://eglife.tistory.com/358 연구주제 고찰eglife.tistory.com이전 시간에, 대강 SQL에 적합한 Feature를 통해서 해당 항목 기준으로 Embedding 하는 것까지 완료 했다. 근데 오늘 Embedding Model에 대한 세미나를 듣다보니 이렇게 접근하는..

https://eglife.tistory.com/361 SQL2NL 모델 실험진행(2)https://eglife.tistory.com/360 SQL2NL 모델 실험진행https://eglife.tistory.com/359 SQL2NL 모델 개선방안에 대한 검토 - Prompt & RAGhttps://eglife.tistory.com/358 연구주제 고찰(2)MCP를 많이 파봤지만, 일단 연구주제는 SQL2NLeglife.tistory.com아무래도 DB를 중점적으로 다루는 교수님을 만났다 보니까 모든 연구에 DB가 묻어있기를 바라시는 거 같다.아래, 내 Flow도 SQL2NL은 NL2SQL 연구의 '검증' 용으로 쓰일 예정이며 이 때문에 LLM의 자연어반환은 거의 99%에 가까운 정확도를 보여야 한다는 ..

https://eglife.tistory.com/360 SQL2NL 모델 실험진행https://eglife.tistory.com/359 SQL2NL 모델 개선방안에 대한 검토 - Prompt & RAGhttps://eglife.tistory.com/358 연구주제 고찰(2)MCP를 많이 파봤지만, 일단 연구주제는 SQL2NL이 위주였으면 한다는 교수님의 바람이 있eglife.tistory.com이제 진짜 실험진행 + Data를 뽑아볼 때가 왔다.실험의 관건은 SQLGlot이 얼마나 유의미한가..를 따져보는 것이다. 기존 BIRD Data set 1534ea에서 DB용 1434ea, test용 100ea를 분류해서 실험을 진행한다.아 댕짜증나는게 실험 하기도 전에 Module 끼리 버전 맞추는 것만 해도 ..

https://eglife.tistory.com/359 SQL2NL 모델 개선방안에 대한 검토 - Prompt & RAGhttps://eglife.tistory.com/358 연구주제 고찰(2)MCP를 많이 파봤지만, 일단 연구주제는 SQL2NL이 위주였으면 한다는 교수님의 바람이 있었다. 그래야 연구실에서 활발히 진행중인 NL2SQL 연구와 엮어서 또eglife.tistory.com지난 시간에, 실험 기획은 다 짰다.이제 본격적으로 실험을 슉슉슉 진행해보자. 실험준비1. SQL 간 Strucutre Similarity 계산 Equation 확립2. Data Set 준비 실험절차 1. Data Set 준비-> BIRD / Spider 2. Data-Set Vector Embedding-> 문제발생😥 :..

MCP를 많이 파봤지만, 일단 연구주제는 SQL2NL이 위주였으면 한다는 교수님의 바람이 있었다. 그래야 연구실에서 활발히 진행중인 NL2SQL 연구와 엮어서 또 하나의 논문이 나올 수 있다는 관점! 뭐.. 공감한다. 얼마 남지 않은 시간, 다층적으로 봐보자1. 지난 KCC에선 SQL2NL을 위한 Prompt Engineering을 주제로 논문을 썼다. 그렇게 하다보니, 각종 Evaluation Matrix를 통해서 NL간 Semantic 유사성을 측정할 수 있었고, 이것으로 뭔가 실험을 진행할 수 있었다. 이 번에도 SQL2NL 연구를 하나 진행하고, 이 또한 K-DS에 제출하고 싶은데 어떤 방법론이 있을지 모르겠다. 나도 'CodeLens: a generative ai framework for dy..