๐ข Megagon Labs
CypherBench: Towards Precise Retrieval over Full-scale Modern Knowledge Graphs in the LLM Era
·2988 words·15 mins·
loading
·
loading
AI Generated
๐ค Daily Papers
Natural Language Processing
Question Answering
๐ข Megagon Labs
๋ณธ ์ฐ๊ตฌ๋ ๋๊ท๋ชจ ํ๋ ์ง์ ๊ทธ๋ํ์์ LLM์ ์ด์ฉํ ์ ํํ ์ ๋ณด ๊ฒ์์ ์ํ ์๋ก์ด ๋ฒค์น๋งํฌ์ธ CypherBench๋ฅผ ์ ์ํฉ๋๋ค. ๊ธฐ์กด์ RDF ๊ธฐ๋ฐ ์ง์ ๊ทธ๋ํ๋ ๊ณผ๋ํ๊ฒ ํฐ ์คํค๋ง์ ๋ฆฌ์์ค ์๋ณ์ ์ฌ์ฉ์ผ๋ก LLM์ ๋นํจ์จ์ ์ด๋ผ๋ ๋ฌธ์ ์ ์ ๋ถ์ํฉ๋๋ค. ํนํ, Wikidata์ ๊ฐ์ ํ๋ ์ง์ ๊ทธ๋ํ๋ LLM์ ๋ฌธ๋งฅ ์ฐฝ ํฌ๊ธฐ๋ฅผ ์ด๊ณผํ๋ ๊ฒฝ์ฐ๊ฐ ๋ง์ต๋…