꿈꾸는공학도

[논문작업] SQL2NL for NL2SQL (2)

https://eglife.tistory.com/372 [논문작업] SQL2NL for NL2SQL (1)너무 놀았다.. 이제는 피할 수가 없는 졸논작업 박사에 비하면 큰 관심이 없는 게 석사논문이기도 하고,, 사실 내가 경력채용으로 가려고 하는 분야와 크게 주제가 맞진 않지만 석사과정은 자고eglife.tistory.com 위 (1) 편에서 엄청나게 고민해봤지만, Rule based SQL2NL을 NL2SQL에 어떻게 이용해야 할 지 감이 잡히지가 않는다. 기존 KSC 논문에서도 Rule based 기법을 Finetuning하는 것은 고려하지 않았었다...이게 Finetuning에만 집착하면, Rule-based를 쓰지 못 한다.그리고, Rule-based를 쓰지 못하면 예비논문심사 이후 개선점을 어필..

너무 놀았다.. 이제는 피할 수가 없는 졸논작업 박사에 비하면 큰 관심이 없는 게 석사논문이기도 하고,, 사실 내가 경력채용으로 가려고 하는 분야와 크게 주제가 맞진 않지만 석사과정은 자고로 '연구하는 방법'을 익히는 시간이라고 하지 않던가! 너어무 놀았지만, 그래도 이러쿵 저러쿵 연구했던 지난 날의 흔적들을 다 모아보는 시간이라 자기만족을 위해서라도 좀 유의미하게 내용을 정리해야 한다. 일단, 초록발표 + 예비심사는 끝났고.. 그 때 발표했던 내용을 필두로 논문작업을 해야한다. 꽤나 내용이 많으니까 시간 있을 때 조금씩 적어놔야 나중에 덜 버벅거릴 거 같다. 엄청난 규모의 텀프로젝트라고 보면 된다.1. 틀잡기 논문틀은 국룰이 있다. 기타 규격들이 다 반영된 #Overleaf Latex를 쓰는 것이 백 ..

지금껏 LLM base로 SQL2NL을 진행했다. 그러다보니 사실 NL2SQL과 유사하게 Task를 진행하느라 그닥 Novelty는 없었다. 그러다금껏 LLM base로 SQL2NL을 진행했다. 그러다보니 사실 NL2SQL과 유사하게 Task를 진행하느라 그닥 Novelty는 없었다. 그러다 SQL-to-Vector Embedding이라는 개념을 새로 도입해 Task를 실행했고 결과는 나쁘지 않았다.https://eglife.tistory.com/370 [KDBC] SQL2NL 모델 발전시키https://eglife.tistory.com/369 SQL2NL 모델을 NL2SQL에 적용시켜보기[3 - 잠정 stop]https://eglife.tistory.com/368 SQL2NL 모델을 NL2SQL에 ..

https://eglife.tistory.com/369 SQL2NL 모델을 NL2SQL에 적용시켜보기[3 - 잠정 stop]https://eglife.tistory.com/368 SQL2NL 모델을 NL2SQL에 적용시켜보기[2]https://eglife.tistory.com/367 SQL2NL 모델을 NL2SQL에 적용시켜보기[1]일단, 이번 글과 관련된 나의 고뇌는 아래와 같다. https://eglife.tistory.com/366eglife.tistory.com위 글.. 지난 시간 내용 요약은 아래박스와 같다.KDBC용 평가 그래프를 다시 재적립 해보자.논문에 쓰일 데이터 / 그래프는 최대한 Massage된 것을 쓰자.지금처럼 가로축은 Case # , 새로축은 Matrix Value 유의미하다 좋..

https://eglife.tistory.com/368 SQL2NL 모델을 NL2SQL에 적용시켜보기[2]https://eglife.tistory.com/367 SQL2NL 모델을 NL2SQL에 적용시켜보기[1]일단, 이번 글과 관련된 나의 고뇌는 아래와 같다. https://eglife.tistory.com/366 SQL2NL 모델 추가 실험(VectorDB, Embedding)[4]https://eglife.tistory.com/3eglife.tistory.com 얼른 접합시켜보자 이것들!!!!!!!!!! 그리고 평가 Data 걍 만들기. Human Based Survey 그냥 만들어서 랩실사람들한테 얼렁 평가받자!![ROW] case=0, strat=Random -> {'id': '0', 'db_i..

https://eglife.tistory.com/367 SQL2NL 모델을 NL2SQL에 적용시켜보기[1]일단, 이번 글과 관련된 나의 고뇌는 아래와 같다. https://eglife.tistory.com/366 SQL2NL 모델 추가 실험(VectorDB, Embedding)[4]https://eglife.tistory.com/364 SQL2NL 모델 추가 실험(VectorDB, Embedding)[3]https://eglife.tistory.coeglife.tistory.com 위 글에서 Continue... 일단, Data Seed를 다르게 해서 좀 더 돌려봤다. 실험 한 번만 하고 데이터 비교하는 것은 좀 무리가 있으니..(그래봤자 2번 더 했다 ㅋ) GPU 대여 서비스를 이용했더니 한 1시간? ..

일단, 이번 글과 관련된 나의 고뇌는 아래와 같다. https://eglife.tistory.com/366 SQL2NL 모델 추가 실험(VectorDB, Embedding)[4]https://eglife.tistory.com/364 SQL2NL 모델 추가 실험(VectorDB, Embedding)[3]https://eglife.tistory.com/363 SQL2NL 모델 추가 실험(VectorDB, Embedding)[2]https://eglife.tistory.com/362 SQL2NL 모델 추가 실험(VectorDB, Embedding)[1]https://egeglife.tistory.comhttps://eglife.tistory.com/365 [Review]Is Long Context All Yo..

https://eglife.tistory.com/364 SQL2NL 모델 추가 실험(VectorDB, Embedding)[3]https://eglife.tistory.com/363 SQL2NL 모델 추가 실험(VectorDB, Embedding)[2]https://eglife.tistory.com/362 SQL2NL 모델 추가 실험(VectorDB, Embedding)[1]https://eglife.tistory.com/361 SQL2NL 모델 실험진행(2)https://eglife.tistory.com/360 Seglife.tistory.comData는 웬만큼 뽑았다. 이제 실험한 Data에서 유의미한 내용을 뽑고 잘 시각화하는 것이 중요할듯. BAR / Line Graph로 각 Prompt Case ..

https://eglife.tistory.com/363 SQL2NL 모델 추가 실험(VectorDB, Embedding)[2]https://eglife.tistory.com/362 SQL2NL 모델 추가 실험(VectorDB, Embedding)[1]https://eglife.tistory.com/361 SQL2NL 모델 실험진행(2)https://eglife.tistory.com/360 SQL2NL 모델 실험진행https://eglife.tistory.com/359 SQL2NL 모델 개선방안eglife.tistory.com이제 Embedding 추가하는 건 여기서 Stop하고 Embedding한 모델이 적절히 쓸만한지, Test를 진행해봐야 한다. Test case를 어떻게 나눠야 할까? 그 전에 이 ..

https://eglife.tistory.com/362 SQL2NL 모델 추가 실험(VectorDB, Embedding)[1]https://eglife.tistory.com/361 SQL2NL 모델 실험진행(2)https://eglife.tistory.com/360 SQL2NL 모델 실험진행https://eglife.tistory.com/359 SQL2NL 모델 개선방안에 대한 검토 - Prompt & RAGhttps://eglife.tistory.com/358 연구주제 고찰eglife.tistory.com이전 시간에, 대강 SQL에 적합한 Feature를 통해서 해당 항목 기준으로 Embedding 하는 것까지 완료 했다. 근데 오늘 Embedding Model에 대한 세미나를 듣다보니 이렇게 접근하는..