하드웨어 설계 자동화의 혁신: 환각 현상을 극복한 LLM 기반 Verilog 코드 생성 프레임워크 HaVen
Yiyao Yang 등 연구진이 개발한 HaVen은 LLM 기반 Verilog 코드 생성에서 환각 현상을 완화하고 HDL 엔지니어링 실무에 부합하는 성능을 제공하는 혁신적인 프레임워크입니다. CoT 메커니즘과 데이터 증강 전략을 통해 정확성을 높였으며, 공개 소스로 제공되어 하드웨어 설계 자동화 분야의 발전에 기여할 것으로 기대됩니다.

최근 대규모 언어 모델(LLM)을 활용한 Verilog 코드 생성 기술이 하드웨어 설계 자동화 분야에서 큰 주목을 받고 있습니다. 하지만 기존 연구들은 LLM의 능력과 실제 HDL(Hardware Description Language) 엔지니어링의 요구사항 간에 괴리가 존재함을 보여주었습니다. 이러한 괴리는 엔지니어들이 질문하는 방식의 차이와 코드 생성 과정에서 발생하는 환각 현상(hallucination – LLM이 사실이 아닌 정보를 생성하는 현상)에 기인합니다.
Yang Yiyao 등 8명의 연구진은 이러한 문제점을 해결하기 위해 환각 현상을 완화하고 HDL 엔지니어의 실무 관행에 맞춰 Verilog 코드를 생성하도록 설계된 혁신적인 LLM 프레임워크 HaVen을 발표했습니다.
HaVen은 환각 현상 문제를 해결하기 위해 포괄적인 분류 체계를 제안하고, 사고 과정(Chain-of-Thought, CoT) 메커니즘을 통해 진리표, 상태 다이어그램과 같은 상징적 모달리티를 정확한 자연어 설명으로 변환합니다. 또한, 실제 HDL 엔지니어링 관행과 일치하는 고품질 명령어-코드 쌍을 생성하는 데이터 증강 전략을 사용하여 LLM과 엔지니어링 실무 간의 괴리를 해소합니다.
연구 결과, HaVen은 Verilog 코드 생성의 정확성을 크게 향상시켰으며, VerilogEval 및 RTLLM 벤치마크에서 기존 최첨단 LLM 기반 Verilog 코드 생성 방법들을 능가하는 성능을 입증했습니다. 더욱 고무적인 것은 HaVen이 https://github.com/Intelligent-Computing-Research-Group/HaVen 에서 공개적으로 사용 가능하다는 점입니다. 이를 통해 더 많은 연구자들이 HaVen을 활용하여 하드웨어 설계 자동화 기술 발전에 기여할 수 있을 것으로 기대됩니다.
이 연구는 LLM 기반 코드 생성 기술의 현실적인 한계를 명확히 제시하고, 이를 극복하기 위한 효과적인 해결책을 제시했다는 점에서 큰 의미를 지닙니다. HaVen의 등장은 하드웨어 설계 자동화 분야의 발전에 중요한 이정표가 될 것으로 예상됩니다. 앞으로 HaVen이 어떻게 발전하고 실제 산업 현장에 적용될지 주목할 필요가 있습니다.
Reference
[arxiv] HaVen: Hallucination-Mitigated LLM for Verilog Code Generation Aligned with HDL Engineers
Published: (Updated: )
Author: Yiyao Yang, Fu Teng, Pengju Liu, Mengnan Qi, Chenyang Lv, Ji Li, Xuhong Zhang, Zhezhi He
http://arxiv.org/abs/2501.04908v1