Ant Group과 Zhejiang University는 오픈 소스 대규모 모델 지식 추출 프레임워크인 OneKE를 공동 출시했습니다.

최근 Ant Group과 Zhejiang University가 공동 개발한 대규모 모델 지식 추출 프레임워크인 OneKE가 오픈 소스로 발표되어 OpenKG 오픈 지식 그래프 커뮤니티에 기부되었습니다.

지식 그래프는 대규모 모델의 신뢰성과 제어성을 달성하는 핵심 기술 중 하나입니다. 지식 추출은 도메인 지식 그래프를 구축하는 데 도움이 될 수 있습니다. OneKE는 연구원과 개발자가 정보 추출, 텍스트 데이터 구조화, 지식 그래프 구성과 같은 문제를 더 잘 처리할 수 있도록 돕기 위해 최선을 다하고 있습니다.

OneKE를 통해 위험 이벤트, 개인 엔터티, 기관 엔터티 등을 추출하면 이벤트 컨텍스트, 이벤트 개발 동향 및 엔터티 간의 관계를 명확하게 표현할 수 있으며, 구성된 그래프는 대규모 모델이 엔터티와 문서 전반에 걸쳐 복잡한 추론을 실현하는 데 도움이 될 수 있습니다. OneKE는 중국어와 영어의 이중 언어를 지원하고 OpenSPG 및 DeepKE 오픈 소스 프레임워크를 지원하며 즉시 사용할 수 있습니다.

대규모 언어 모델은 세계 지식을 처리하는 인공 지능 시스템의 능력을 크게 향상시켰습니다. 그러나 실제 정보는 고도로 단편화되고 구조화되어 있지 않으므로 대규모 언어 모델이 정보 추출 작업을 처리할 때 추출된 내용과 자연어 표현 간의 큰 차이로 인해 여전히 결과가 좋지 않습니다. 지식 추출 작업에 더 큰 어려움을 가져오는 많은 모호함, 다의어, 은유 등이 있습니다. 이는 또한 대형 언어 모델로 대표되는 생성적 인공지능이 여전히 추론 능력 부족, 사실적 지식 부족, 생성 결과 불안정 등의 문제를 안고 있어 대형 언어 모델의 산업화를 크게 저해한다는 사실로 이어진다.

통합 지식 추출 프레임워크는 도메인 지식 그래프 구축 비용을 크게 줄일 수 있으며 다양한 적용 시나리오를 제공합니다. 이는 대용량 데이터에서 구조화된 지식을 추출하고, 고품질의 지식 그래프를 구축하고, 지식 요소 간의 논리적 연결을 구축함으로써 설명 가능한 추론 결정을 내릴 수 있으며, 대형 모델을 강화하여 환상을 완화하고 안정성을 향상시키는 데에도 사용할 수 있음을 의미합니다. 수직 분야에서 대형 모델의 적용을 가속화합니다.

의료 분야에서는 지식 추출을 통해 의사의 경험에 대한 지식 관리가 이루어지며, 통제 가능한 보조 진단 및 치료, 의료 Q&A가 구축됩니다. 금융 분야에서 지식 추출 부서는 재무 지표, 위험 사건, 인과 관계, 산업 체인 등에 사용되어 자동 재무 연구 보고서 생성, 위험 예측, 산업 체인 분석 등을 수행합니다. 대정부 시나리오에서는 대정부 규정에 대한 지식을 구현하여 대정부 서비스의 효율성과 정확한 의사결정을 향상시킬 수 있습니다.

생산 기반 인공 지능의 산업적 구현을 ​​가속화하기 위해 Ant Group과 Zhejiang University는 대형 모델로 강화된 지식 그래프 구축, 지식으로 강화된 신뢰할 수 있고 제어 가능한 생성 기능과 같은 주제에 초점을 맞춘 공동 지식 그래프 연구소를 설립했습니다. , 도메인 지식의 세계지도 공동 기술 연구를 통해 대규모 언어 모델 및 지식 그래프의 양방향 향상으로 제어 가능한 생성 기능 패러다임 구축을 위한 전방위 협력을 수행합니다.

Ant Group과 Zhejiang University는 지식 추출 분야에서 Ant Bailing 대형 모델의 기능을 공동으로 구축 및 업그레이드했으며, 중국어-영어 이중 언어 대형 모델 지식 추출 프레임워크인 OneKE를 출시하고 LLaMA2 전체 기반 버전을 오픈 소스화했습니다. -매개변수 미세 조정. 테스트 지표는 OneKE가 완전히 감독되고 샘플이 없는 여러 엔터티/관계/이벤트 추출 작업에서 상대적으로 좋은 결과를 달성했음을 보여줍니다.

OneKE는 우수한 중국어-영어 이중 언어 일반화 가능 지식 추출 도구로, 중국어 NER 명명 엔터티 인식 작업, RE 관계 추출 작업 및 EE 이벤트 추출 작업에서 비교적 좋은 결과를 얻었습니다.

Ant Group의 지식 그래프 책임자인 Liang Lei는 Ant가 다양한 시나리오에서 대규모 모델의 제어 가능하고 신뢰할 수 있는 요구 사항을 충족하기 위해 지식 추출 성능을 계속 최적화할 것이라고 말했습니다. 앞으로는 업계 파트너와 협력해 관련 기술 시스템을 금융, 의료, 정부 업무 등 다양한 수직 분야에 적용하고, 지식 그래프와 대규모 언어 모델을 기반으로 하는 제어 가능한 발전 기술의 산업적 구현을 ​​촉진할 것입니다.

OneKE 공식 홈페이지: http://oneke.openkg.cn/

OpenSPG GitHub: https://github.com/OpenSPG/openspg

위 내용은 Ant Group과 Zhejiang University는 오픈 소스 대규모 모델 지식 추출 프레임워크인 OneKE를 공동 출시했습니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!