Hệ thống trích xuất và truy vấn đồ thị tri thức mạng xã hội với GraphRAG cục bộ
Nền tảng khai phá dữ liệu mạng xã hội sử dụng mô hình GraphRAG triển khai cục bộ, hỗ trợ hỏi đáp ngữ nghĩa và trực quan hóa liên kết quan hệ.
Giới thiệu
Trong bối cảnh bùng nổ thông tin mạng xã hội, các phương pháp tìm kiếm truyền thống thường gặp khó khăn trong việc tổng hợp các mối quan hệ phức tạp giữa các thực thể, người dùng và nội dung thảo luận. Đề tài tập trung xây dựng một giải pháp truy vấn thông minh kết hợp giữa Retrieval-Augmented Generation (RAG) và Đồ thị tri thức (Knowledge Graph), cho phép hệ thống hiểu sâu về cấu trúc ngữ nghĩa và liên kết tiềm ẩn trong các cuộc thảo luận trực tuyến mà không phụ thuộc vào các dịch vụ đám mây bên thứ ba.
Hệ thống được phát triển theo kiến trúc Fullstack với nền tảng Django đóng vai trò điều phối luồng dữ liệu, quản lý phiên làm việc và tích hợp các pipeline AI cục bộ. Giao diện trực quan cho phép người dùng nhập nguồn dữ liệu văn bản từ mạng xã hội, tự động xây dựng mạng lưới thực thể và thực hiện truy vấn ngôn ngữ tự nhiên. Việc tối ưu hóa quy trình trích xuất và chỉ mục đồ thị đảm bảo tính chính xác của câu trả lời, đồng thời tăng cường khả năng bảo mật thông tin và quyền riêng tư dữ liệu khi vận hành nội bộ.
Chức năng có trong gói chuẩn
- Thu thập và tiền xử lý dữ liệu bài viết, bình luận từ mạng xã hội
- Tự động trích xuất thực thể, quan hệ và xây dựng đồ thị tri thức cục bộ
- Truy vấn thông tin kết hợp đồ thị tri thức và mô hình ngôn ngữ lớn (GraphRAG)
- Giao diện tương tác trực quan hóa mạng lưới liên kết thực thể theo thời gian thực
- Hỏi đáp ngữ nghĩa đa chiều với khả năng truy vết nguồn gốc thông tin
- Quản lý phiên hội thoại, lịch sử phân tích và xuất báo cáo tri thức
- Bảng điều khiển quản trị viên và cấu hình tham số suy luận cục bộ
Chức năng ngoài danh sách này được tính riêng và ghi rõ trong bản chốt scope trước khi bắt đầu.
Công nghệ
- django
Muốn đổi sang công nghệ khác cho khớp yêu cầu môn học? Được — báo trước khi chốt scope, giá điều chỉnh theo hệ số công nghệ chứ không phải làm lại từ đầu.