Tích hợp Talk2View
Trải nghiệm Talk2View được tích hợp ngay trong những công cụ bạn đang dùng. Khám phá các tích hợp và bắt đầu chỉ trong vài phút.
Nền tảng hình ảnh y khoa 3D Slicer
Đưa trợ lý AI Talk2View vào 3D Slicer, nền tảng miễn phí, mã nguồn mở để phân tích hình ảnh y khoa và trực quan hoá khoa học. Trò chuyện với dữ liệu, chạy phân đoạn bằng AI và điều phối các quy trình làm việc phức tạp với hình ảnh bằng ngôn ngữ tự nhiên.
Điều khiển bằng ngôn ngữ tự nhiên
Mô tả điều bạn muốn bằng ngôn ngữ tự nhiên, trợ lý Talk2View sẽ điều phối 3D Slicer cho bạn. Không cần lục tìm trong menu.
Phân đoạn bằng AI
Phân đoạn tiên tiến với TotalSegmentator, nnInteractive, MONAI và cọ vẽ thích ứng (adaptive brush), tất cả điều khiển bằng hội thoại.
IDC và DICOM
Tìm kiếm và mở các ca chụp từ NCI Imaging Data Commons, và làm việc với dữ liệu DICOM của riêng bạn.
Nhập liệu bằng giọng nói
Chuyển giọng nói thành văn bản ngay trên máy (Whisper), không cần dùng tay, để bạn vừa làm việc vừa trò chuyện với dữ liệu.
Đa ngôn ngữ
Tương tác bằng ngôn ngữ của bạn. Trợ lý hiểu và trả lời bằng nhiều ngôn ngữ.
Trợ lý AI có thể mở rộng
Thêm và quản lý kỹ năng, trình kết nối và công cụ để dạy trợ lý những quy trình làm việc mới.
Tải xuống
Miễn trừ trách nhiệm
Không phải thiết bị y tế. Chỉ dùng cho mục đích giáo dục và nghiên cứu. Xem điều khoản sử dụng.
Tương thích: Tiện ích mở rộng này cần 3D Slicer phiên bản 5.10.0. Cần phiên bản khác? Liên hệ đội ngũ của chúng tôi.
Cài đặt
- 1Tải tiện ích mở rộng Talk2View cho hệ điều hành bạn dùng.
- 2Trong 3D Slicer, mở Extension Manager (tài liệu hướng dẫn).
- 3Nhấn Install from file… và chọn tệp vừa tải về.
- 4Khởi động lại 3D Slicer.
- 5Trong bảng điều khiển Talk2View, đăng nhập bằng email và mật khẩu.
- 6Chọn một bộ dữ liệu mẫu và nhấn Download, hoặc mở dữ liệu của riêng bạn bằng mô-đun Data.
- 7Bắt đầu trò chuyện với Aimelia, trợ lý của Talk2View, để khám phá dữ liệu của bạn.
Tự xây dựng và gỡ lỗi trợ lý AI xử lý hình ảnh của riêng bạn
Tiện ích mở rộng này là một nền tảng trợ lý AI hoàn chỉnh. Xem xét từng bước của mỗi lượt chạy, mở rộng trợ lý bằng kỹ năng và công cụ của riêng bạn, dùng mô hình bạn chọn và gọi các công cụ phân đoạn hàng đầu, tất cả ngay trong 3D Slicer.
LLM Debug Inspector
Duyệt từng bước qua mỗi lượt chạy của trợ lý và xem tin nhắn thô, định nghĩa công cụ, lượt gọi công cụ, phản hồi, thời gian và lượng token đã dùng. Tạm dừng, tiếp tục hoặc đặt điểm dừng ở bất kỳ bước nào.
Kỹ năng, trình kết nối và công cụ
Dạy trợ lý quy trình làm việc mới bằng kỹ năng viết bằng Markdown và trình kết nối Python cung cấp công cụ. Bật, tắt, nhân bản, nhập và xuất chúng từ trình quản lý có sẵn.
Dùng mô hình bạn chọn
Dùng Anthropic Claude, OpenAI và Google Gemini, cùng các mô hình chuyên về y khoa như Google MedGemma. Các mô hình có sẵn tuỳ theo gói của bạn.
Phân đoạn tiên tiến
nnInteractive, TotalSegmentator, MONAI Label, MONAI Auto3DSeg và cọ vẽ thích ứng, tất cả đều gọi được như công cụ của trợ lý.
Mô hình được hỗ trợ
Phân đoạn
Thông tin thêm — mở rộng trợ lý
Kỹ năng của trợ lý
Kỹ năng là các tệp Markdown đơn giản (có YAML frontmatter), dạy trợ lý cách thực hiện một quy trình làm việc. Thêm kỹ năng mới vào thư mục kỹ năng của bạn hoặc tạo trong trình quản lý có sẵn, rồi bật, tắt, nhân bản hoặc nhập/xuất dưới dạng .zip.
Trình kết nối và công cụ
Trình kết nối là các lớp Python cung cấp công cụ cho trợ lý. Mỗi công cụ chỉ là một phương thức có khai báo kiểu, với docstring trở thành phần mô tả cho mô hình. Các thư viện phụ thuộc được cài tự động. Trình kết nối có sẵn gồm trình tra cứu Imaging Data Commons, MedGemma và mọi công cụ phân đoạn ở trên.
LLM Debug Inspector
Mở trình kiểm tra để xem dòng thời gian của từng lượt trao đổi: tin nhắn gửi đến mô hình, các công cụ có sẵn, phản hồi và lượt gọi công cụ của mô hình, siêu dữ liệu và lượng token đã dùng. Chạy từng bước, tiếp tục hoặc đặt điểm dừng để gỡ lỗi hành vi của trợ lý theo thời gian thực.
Trình xem hình ảnh trên web OHIF
Đưa trợ lý AI Talk2View vào OHIF, trình xem hình ảnh y khoa trên web, mã nguồn mở và không cần cài đặt. Trò chuyện với ảnh chụp, chạy phân đoạn bằng AI và điều phối các quy trình làm việc của khoa chẩn đoán hình ảnh ngay trên trình duyệt. Không cần cài gì thêm.
Điều khiển trình xem bằng ngôn ngữ tự nhiên
Yêu cầu trợ lý chỉnh cửa sổ/mức (window/level), chuyển lát cắt, đổi bố cục và áp dụng giao thức hiển thị (hanging protocol). Trợ lý sẽ điều khiển trình xem cho bạn.
Hỏi đáp thị giác – ngôn ngữ
Đặt câu hỏi về ảnh chụp đang hiển thị trên màn hình. Câu trả lời do Google MedGemma cung cấp.
Phân đoạn bằng AI
Tự động phân đoạn cơ quan và các cấu trúc giải phẫu với TotalSegmentator, cùng các công cụ cọ vẽ, tẩy và ngưỡng của OHIF.
IDC và DICOMweb
Mở các ca chụp từ NIH Imaging Data Commons hoặc kết nối bất kỳ máy chủ DICOMweb nào.
Nhập liệu bằng giọng nói
Chuyển giọng nói thành văn bản đa ngôn ngữ, để ghi chú và nhập câu lệnh mà không cần dùng tay.
Báo cáo bằng Markdown
Biến kết quả phân tích của AI và ghi chú của bạn thành báo cáo gọn gàng, có định dạng.
Xem trực tiếp tại app.talk2view.com
app.talk2view.com là ứng dụng minh hoạ của chúng tôi: trình xem trên web của Talk2View, xây dựng trên OHIF. Mở một ca chụp công khai từ Imaging Data Commons hoặc tải lên tệp DICOM của riêng bạn, rồi trò chuyện với Aimelia, trợ lý của Talk2View.
Bắt đầu miễn phí. Đăng ký để dùng trợ lý, và nâng cấp gói khi bạn cần thêm token.
Thêm Talk2View vào hệ thống OHIF của riêng bạn
Trình xem trên web của Talk2View là một bản triển khai OHIF 3.x tuỳ chỉnh, gồm các tiện ích mở rộng dùng ngay và một chế độ (mode). Liên kết các bảng điều khiển dựng sẵn vào bản OHIF của riêng bạn, hoặc nhúng trợ lý vào bất cứ đâu với @talk2view/sdk.
Tiện ích mở rộng và chế độ OHIF dùng ngay
Các bảng điều khiển dựng sẵn cho khung chat, chuyển giọng nói thành văn bản, phân đoạn và Imaging Data Commons, cùng chế độ Talk2View bạn có thể liên kết vào một bản triển khai OHIF 3.x.
Xây dựng trên @talk2view/sdk
Bọc bảng điều khiển của bạn bằng T2VProvider và dùng các hook useT2VAuth, useT2VChat và useT2VTools.
Công cụ của riêng bạn
Đăng ký các công cụ phía client có khai báo kiểu, để trợ lý đọc trạng thái trình xem và điều khiển giao diện của bạn bằng ngôn ngữ tự nhiên.
Dùng mô hình bạn chọn
Mô hình do nền tảng Talk2View quản lý: Anthropic Claude, OpenAI, Google Gemini và Google MedGemma.
Mô hình được hỗ trợ
Thông tin thêm — tích hợp với OHIF
- 1Cài
@talk2view/sdkvà bọc khung chat của bạn bằngT2VProvider, kèm khoá đối tác (partner key) của bạn. - 2Dùng các hook useT2VAuth, useT2VChat và useT2VTools để xử lý đăng nhập, nhắn tin và đăng ký công cụ.
- 3Đăng ký các công cụ phía client có khai báo kiểu để đọc trạng thái trình xem và điều khiển Cornerstone: cửa sổ/mức, điều hướng, bố cục, giao thức hiển thị và phân đoạn.
- 4Hoặc bỏ qua bước kết nối thủ công và liên kết các tiện ích mở rộng OHIF dựng sẵn (khung chat, chuyển giọng nói thành văn bản, phân đoạn, Imaging Data Commons) cùng chế độ Talk2View vào bản triển khai của bạn.
T2Board
AI ngay trong bàn phím. T2Board thêm một bàn phím tuỳ chỉnh vào thiết bị, để bạn đặt câu hỏi cho các mô hình AI hàng đầu và dán câu trả lời vào bất kỳ ứng dụng nào. Hoạt động với tài khoản Talk2View của bạn.
Gõ ở bất cứ đâu với phím quả địa cầu
Chuyển sang T2Board bằng phím quả địa cầu trong bất kỳ ứng dụng nào, gõ câu hỏi và nhận câu trả lời từ AI mà không phải rời ứng dụng đang dùng.
Tự chọn mô hình
Chọn nhà cung cấp và mô hình: OpenAI, Anthropic, Google và nhiều hơn nữa qua OpenRouter, được nhóm theo nhà cung cấp để chuyển đổi nhanh.
Trả lời hiện dần, có định dạng
Câu trả lời hiện ra dần với định dạng phong phú: chữ đậm, chữ nghiêng, đề mục, danh sách và khối mã đều hiển thị ngay trong câu trả lời.
Thiết kế cho nhắn tin
Sao chép câu trả lời chỉ với một chạm và dán vào cuộc trò chuyện trên WhatsApp, iMessage hay bất kỳ ô nhập văn bản nào.
Chọn, sao chép và tra cứu
Văn bản tin nhắn luôn chọn được, kèm sao chép và tra cứu bằng một chạm, để bạn dùng lại bất kỳ phần nào của câu trả lời.
Một tài khoản Talk2View
Đăng nhập bằng tài khoản Talk2View, cũng là tài khoản dùng cho mọi tích hợp khác của Talk2View.
Miễn phí trên iPhone (iOS 18.6+) · Sắp có trên Android