Báo cáo toàn văn nhập môn công nghệ thông tin. Đề tài : Brain – Computer Interface | Trường Đại học sư phạm kỹ thuật TP Hồ Chí Minh

Não bộ là một trong những cơ quan quan trọng nhất, về cơ
bản chịu trách nhiệm điều phối toàn bộ các cơ quan khác trong cơ thể con người. Tài liệu giúp bạn tham khảo, ôn tập và đạt kết quả cao. Mời bạn đọc đón xem!

Thông tin:
77 trang 4 tháng trước

Bình luận

Vui lòng đăng nhập hoặc đăng ký để gửi bình luận.

Báo cáo toàn văn nhập môn công nghệ thông tin. Đề tài : Brain – Computer Interface | Trường Đại học sư phạm kỹ thuật TP Hồ Chí Minh

Não bộ là một trong những cơ quan quan trọng nhất, về cơ
bản chịu trách nhiệm điều phối toàn bộ các cơ quan khác trong cơ thể con người. Tài liệu giúp bạn tham khảo, ôn tập và đạt kết quả cao. Mời bạn đọc đón xem!

50 25 lượt tải Tải xuống
BỘ GIÁO DỤC VÀ ĐÀO TẠO
TRƯỜNG ĐẠI HỌC SƯ PHẠM KỸ THUẬT TP.HCM
KHOA CÔNG NGHỆ TÔNG TIN
BÁO CÁO TOÀN VĂN NHẬP MÔN
CÔNG NGHỆ THÔNG TIN
Đề bài: Brain – Computer Interface
Giảng viên hướng dẫn: Đinh Công Đoan
Nhóm thực hiện: Nhóm 3
Lớp: 231INIT130185_07
Tp Hồ Chí Minh, ngày 7 tháng 12 năm 2023
DANH SÁCH NHÓM
Họ và tên MSSV
Phân công
Nhiệm vụ
Mức độ
hoàn
thành
Nguyễn Quốc
Khánh
231102
39
Soạn đề cương,
phần mở đầu
tổng hợp, chỉnh
sửa báo cáo,
thuyết trình.
100 %
Mai Hồng Tín
231103
42
Soạn chương 1,
soạn đề cương,
nhiệm vụ của luận
văn, chỉnh sửa
báo cáo.
100 %
Nông Thị Ngọc
Châm
231103
74
Soạn chương 3 100 %
Cáp Thanh Nhàn
231102
76
Soạn chương 2 100 %
Phạm Thị Tuyết
Minh
231102
68
Soạn PowerPoint 100 %
Nguyễn Thành
Tài
231103
09
Soạn chương 4,
kết luận kiến
nghị
100 %
MỤC LỤC
PHẦN MỞ
ĐẦU……………………………………………………………………………...1
1. Tính cấp
thiết………………………………………………………………………………1
2. Mục tiêu của luận
án………………………………………………………………………2
3. Cách tiếp cận và phương pháp nghiên
cứu………………………………………………3
4. Phân tích những công trình có liên
quan………………………………………………...3
5. Kết quả dự kiến đạt
được…………………………………………………………………3
CHƯƠNG 1. TỔNG QUAN VỀ TÍN HIỆU ĐIỆN NÃO VÀ XỬ LÝ, PHÂN
TÍCH TÍN HIỆU ĐIỆN
NÃO…………………………………………………………………………….4
1.1 Giới thiệu tổng quát về tín hiệu điện
não………………………………………………4
1.2 Tín hiệu điện não và phương pháp đo tín hiệu từ não
bộ……………………………..5
1.2.1 Chụp quang phổ cận hồng ngoại chức
năng…………………………….6
1.2.2. Chụp Cộng hưởng từ chức
năng………………………………………...6
1.2.3. Chụp cắt lớp phát xạ
positron…………………………………………...7
1.2.4. Từ não
đồ……………………………………………………………….....7
1.2.5 Điện não đồ xâm
lấn……………………………………………………....8
1.2.6. Điện não
đồ………………………………………………………………..8
1.3. Một số phương pháp xử lý, phân tích tín hiệu điện
não………………………9
1.3.1. Biến đổi
wavelet………………………………………………………..9
1.3.2. Phân tích thành phần độc lập trong khử nhiễu tín
hiệu điện não….10
1.3.3 Mạng Nơron
wavelet…………………………………………………..11
1.4. Một số ứng dụng hệ giao diện não máy
tính…………………………………..12
1.4.1 Hệ
BCI2000…………………………………………………………….12
1.4.2 Hệ VR-BCI trong phục hồi chức
năng……………………………….13
1.4.3 Một số hệ BCI trong đánh vần kí
tự………………………………….13
1.5 Kết luận chương 1
…………………………………………………………………..….15
CHƯƠNG 2. PHƯƠNG PHÁP HỌC SÂU TỰ MÃ HÓA THƯA WAVELET
TRONG KHỬ TÍN HIỆU ĐIỆN NÃO BẤT THƯỜNG DO NHÁY
MẮT………………………..16
2.1 Đặt vấn
đề…………………………………………………………………………16
2.2 Đề xuất phương pháp học sâu tự mã hóa thưa
wavelet…………………………17
2.2.1 Mạng học sâu tự mã hóa
thưa……………………………………….18
2.3 Phương pháp dò đếm EOG dựa trên biến đổi wavelet
Haar……………………19
2.3.1 Biến đổi wavelet
Haar………………………………………………..19
2.3.2 Thuật toán dò tìm EOG dựa trên biến đổi wavelet
Haar………….20
2.4. Mạng học sâu tự mã hóa thưa wavelet trong khử
EOG…………………………….22
2.4.1. Huấn luyện tự
động………………………………………………22
2.4.2 Tự động sửa lỗi tín
hiệu……………………………………………..23
2.5 Độ đo đánh giá kết
quả…………………………………………………………….23
2.6 Kết
quả……………………………………………………………………………...24
2.6.1 Dữ liệu kiểm
thử……………………………………………………...24
2.6.2 Thiết kế thí
nghiệm…………………………………………………..25
2.7 Kết quả thí
nghiệm…………………………………………………………………25
2.7.1 Kết quả trên Tập dữ liệu 1: thực hiện nhiệm vụ chú
ý quan sát…25
2.7.2 Kết quả trên Tập dữ liệu 2: nhận dạng trạng thái
suy nghĩ………29
2.7.3 Kết quả trên tập dữ liệu 3: tín hiệu điện não mô
phỏng chứa
nhiễu…………………………………………………………………………………………
33
2.8 Thảo
luận…………………………………………………………………………...34
2.9 Kết luận Chương
2…………………………………………………………………36
CHƯƠNG 3. ĐỀ XUẤT MỘT SỐ PHƯƠNG PHÁP PHÂN LOẠI TÍN HIỆU
ĐIỆN NÃO DỰA TRÊN HỌC
MÁY…………………………………………………………….37
3.1 Đặt vấn đề…………………………………………………………………….
…...37
3.2 Cơ sở dữ liệu thử
nghiệm………………………………………………………...37
3.3 Đề xuất một số phương pháp phân loại trạng thái suy
nghĩ dựa trên học
máy…………………………………………………………………………………………..
38
3.4 Kết quả và thảo
luận………………………………………………………………40
3.5 Kết luận chương
3…………………………………………………………………42
CHƯƠNG 4. ĐỀ XUẤT HỆ GIAO DIỆN NÃO MÁY TÍNH TRONG ĐIỀU
KHIỂN CÁC THIẾT BỊ ĐIỆN TỬ GIA DỤNG THÔNG
MINH………………………………...44
4.1 Hệ giao diện não máy tính trong điều khiển thiết bị điện
tử gia dụng thông
minh…………………………………………………………………………………………
44
4.1.1 Khối thu tín hiệu và thiết bị Emotiv
Epoc………………………….44
4.1.2 Khối
DSP……………………………………………………………..46
4.1.3 Khối WioT……………………………………………………………
47
4.2 Đề xuất mô hình học cộng đồng dạng xếp ngăn trong
phân loại tín hiệu điện não cho hệ giao diện não máy tính trong
điều khiển các thiết bị điện tử gia dụng thông
minh…………………………………………………………………………………………
48
4.3 Kết quả và thảo
luận……………………………………………………………...51
4.4 Kết luận Chương
4……………………………………………………………..…54
PHẦN KẾT LUẬN VÀ KIẾN
NGHỊ……………………………………………………..55
TÀI LIỆU THAM
KHẢO………………………………………………………………....59
PHẦN MỞ ĐẦU
1.Tính cấp thiết
Não bộ là một trong những cơ quan quan trọng nhất, về cơ
bản chịu trách nhiệm điều phối toàn bộ các cơ quan khác trong
cơ thể con người. Cơ chế hoạt động của não bộ là một vấn đề
rất phức tạp, đến nay khoa học chưa có lời giải rõ ràng. Nếu não
bộ hoạt động không bình thường có thể do các vấn đề tâm lý
hay xáo trộn về cấu trúc sinh học, một số bệnh liên quan có thể
xuất hiện như suy giảm trí nhớ, tự kỷ/trầm cảm, Parkinson, đột
qụy… Tín hiệu điện não là một cách tiếp cận phù hợp để có thể
đánh giá tình trạng của não bộ trong các trường hợp kể trên do
chất lượng tín hiệu tốt, độ phân giải cao, tính linh động của thiết
bị, an toàn và giá thành hợp lý trong điều kiện Việt Nam nếu so
sánh với các phương pháp thu tín hiệu từ não bộ khác như chụp
cộng hưởng từ, chụp cắt lớp, điện não đồ xâm lấn…
Tín hiệu điện não hay sóng điện não (Electroencephalogram
– EEG) là các giá trị điện thế có giá trị rất nhỏ, tạo ra bởi quá
trình tương tác với nhau của các tế bào thần kinh trong não. Tín
hiệu EEG thường có biên độ trong khoảng từ 10 µV đến 100 µV
và tần số trong dải từ 1 Hz đến 100 Hz. Tín hiệu EEG không tuân
theo phân bố Gauss thông thường và cũng không tĩnh
(nonstationary). Thông thường, tín hiệu EEG cho biết thông tin
về các hoạt động theo nhịp (rhythmic activities) trên các dải tần
số khác nhau như dải tần Delta (0.5–4 Hz), Theta (4-8 Hz), Alpha
(8-13 Hz), Beta (13-30 Hz) và Gamma (30-50 Hz). Phân tích tín
hiệu EEG có thể dẫn đến một số phát hiện như: nhịp Delta
thường được thu được ở các trẻ nhỏ dưới 1 tuổi và trong trạng
thái ngủ sâu của người lớn; nhịp Theta tồn tại ở trẻ em nhỏ dưới
7 tuổi hoặc trẻ em bình thường hoặc ở người lớn trong trạng
thái buồn ngủ hoặc đang ngủ; một lượng lớn tín hiệu nhịp Theta
thu được ở người lớn trong trạng thái tỉnh táo là dấu hiệu cảnh
báo tình trạng bất thường hoặc dấu hiệu bị bệnh...
Một số ứng dụng của hệ BCI có thể kể đến trong việc hỗ trợ
phục hồi chức năng của người bị liệt nửa người do chấn thương
tủy sống [1], cho phép người sử dụng điều khiển các nhân vật
hoạt họa di chuyển trong một trò chơi điện tử dựa trên Xung
phản ứng kích thích thị giác trạng thái ổn định [2], điều khiển
con chuột máy tính [3].
1
Học máy là các phương pháp tính toán thông minh cho
phép máy tính tạo ra các mô hình toán học có tham số hình
thành bởi quá trình khai phá, huấn luyện với dữ liệu gán nhãn
(học có giám sát) hoặc không cần gán nhãn (học không giám
sát).
Học sâu hay mạng nơ-ron nhân tạo sâu (deep neural
network) với các cấu trúc khác nhau như mạng niềm tin (deep
belief net), máy tự mã hóa thưa (autoencoder), mạng tích chập
(convolutional neural network), mạng sinh đối nghịch
(generative adversarial networks)... là các thuật toán học máy
được ứng dụng rất thành công trong nhiều lĩnh vực. Các thuật
toán học sâu khi có nhiều dữ liệu để huấn luyện sẽ càng trở nên
hiệu quả trong việc thực hiện chức năng được “dạy”. Kết quả
thực nghiệm trong luận án này mới chỉ tiến hành trên một tập
dữ liệu quy mô nhỏ, tuy nhiên việc sử dụng các phương pháp
học sâu là bước chuẩn bị
sẵn sàng để triển khai công nghệ đề xuất cho các bài toán
thực tế, khi có lượng lớn dữ liệu. Dựa trên những phân tích ở
trên, việc nghiên cứu và phát triển các phương pháp xử lý và
phân loại tín hiệu điện não, hướng đến áp dụng các phương
pháp này trong một hoặc một số ứng dụng cụ thể là một vấn đề
nghiên cứu có ý nghĩa khoa học và thực tiễn cao, rất cần thiết
được tập trung nghiên cứu một cách kỹ lưỡng.
2. Mục tiêu của luận án
Luận án đặt ra một số mục tiêu như sau:
- Phát triển phương pháp để tăng cường chất lượng điện não
dựa trên học máy: Với vai trò là thông tin đầu vào, chất lượng
của bản ghi tín hiệu điện não rất quan trọng, ảnh hưởng đến
chất lượng xử lý và phân loại tín hiệu của hệ xử lý, phân tích tín
hiệu điện não. Do đó, việc tăng cường chất lượng điện não, cụ
thể là loại bỏ thành phần tín hiệu điện não không mong muốn
trong đó tín hiệu điện não bất thường sinh ra do nháy mắt
(Electrooculography – EOG), là một cách tiếp cận phù hợp để
tăng hiệu quả hoạt động của hệ BCI cũng như các hệ thống
phân tích tính hiệu điện não khác.
- Phát triển các phương pháp trong phân tích, xử lý tín hiệu
điện não dựa trên các phương pháp học máy trong đó bao gồm
việc kiểm thử các phương pháp học có giám sát và không giám
sát dựa trên SVM, ANN, DNN, Học cộng đồng: Đối với các
2
phương pháp phân tích tín hiệu điện não dựa trên học có giám
sát, kết quả phân loại tín hiệu sẽ cho thấy mô hình đã được
huấn luyện có thể học và làm tốt đến đâu với 14 dữ liệu tín hiệu
điện não đầu vào đã được gán nhãn. Trong trường hợp xử lý tín
hiệu điện não với phương pháp học không giám sát, luận án sẽ
kiểm chứng việc một thuật toán học máy trong trường hợp cụ
thể có thể làm tốt đến đâu khi đã biết nhiệm vụ nhưng chưa
thực sự thực hiện nhiệm vụ này bao giờ.
- Phát triển một qui trình thu nhận dữ liệu với thiết kế thí
nghiệm riêng để đảm bảo phù hợp với hệ thống BCI có khả năng
điều khiển các thiết bị điện tử gia dụng thông minh: Hiện nay,
rất nhiều nghiên cứu về xử lý, phân tích tín hiệu điện não trên
thế giới sử dụng tập dữ liệu có sẵn được công bố miễn phí và
rộng rãi. Tuy nhiên cách tiếp cận này có một nhược điểm là dữ
liệu thu trước không phải lúc nào cũng phù hợp với nội dung của
nghiên cứu. Một số nghiên cứu khác chủ động tiến hành thu
nhận và sử dụng dữ liệu thu được. Để thực hiện hệ BCI như vậy,
nghiên cứu trong khuôn khổ luận án này đã phát triển một qui
trình thu nhận dữ liệu với thiết kế thí nghiệm riêng để đảm bảo
phù hợp với hệ thống BCI có khả năng điều khiển các thiết bị
điện tử gia dụng thông minh.
3. Cách tiếp cận và phương pháp nghiên cứu:
Đối tượng nghiên cứu: Nghiên cứu sẽ tập trung vào việc
khảo sát và phân tích tín hiệu điện não, cũng như xác định
khả năng ứng dụng của chúng trong BCI.
Phạm vi nghiên cứu: Từ việc đánh giá và so sánh các
phương pháp xử lý tín hiệu, đến việc đề xuất mô hình hệ
thống BCI trong điều khiển máy móc.
4. Phân tích những công trình có liên quan:
Chúng ta sẽ tiến hành phân tích kỹ lưỡng những nghiên
cứu, công trình liên quan đã được thực hiện trước đó về BCI và
ứng dụng của nó trong điều khiển máy móc. Điều này sẽ giúp
định hình được nền tảng kiến thức và hiểu rõ sâu hơn về trạng
thái hiện tại của lĩnh vực này.
5. Kết quả dự kiến đạt được:
3
Kết quả dự kiến của luận văn này sẽ là việc áp dụng kiến
thức từ các nghiên cứu, đề xuất các phương pháp mới và tiến bộ
trong việc xây dựng giao diện não máy tính để tạo ra một hệ
thống BCI có khả năng điều khiển máy móc bằng ý nghĩ một
cách hiệu quả và đáng tin cậy.
4
CHƯƠNG 1: TỔNG QUAN VỀ TÍN HIỆU ĐIỆN NÃO VÀ
XỬ LÝ, PHÂN TÍCH TÍN HIỆU ĐIỆN NÃO
1.1. Giới thiệu tổng quát về tín hiệu điện não.
Bộ não, trung tâm điều khiển của hệ thần kinh trung ương,
đóng vai trò rất quan trọng trong việc điều phối các hoạt động
của các cơ quan khác sản sinh ra ý thức Não bộ (Hình 1) .
khoảng 100 tỉ tế bào thần kinh một trong những bộ phận
sinh học phức tạp nhất trong trong thể con người. Tìm hiểu
về cấu trúc của não bộ cũng như cách thức não bộ truyền nhận
thông tin một lĩnh vực chứa nhiều tiềm năng đem tới những
phát kiến khoa học lớn. Để thực hiện được việc đó, một trong
những việc đầu tiên quan trọng nhất phải thu nhận được
những tín hiệu/thông tin do não bộ sản sinh hay còn được gọi
tín hiệu điện não. Tín hiệu điện não các sóng điện được phát
ra bởi các tế bào thần kinh trong não, thể được ghi lại
phân tích bằng các thiết bị như điện cực, máy đo điện não đồ
(EEG) hay máy đo điện thế não (MEG). Tín hiệu điện não thể
phản ánh các hoạt động của não, như ngủ, thức, tập trung, học
tập, cảm xúc hay các rối loạn thần kinh. Tín hiệu điện não
nhiều dạng khác nhau theo tần số biên độ, mỗi dạng ý
nghĩa riêng về chức năng và trạng thái của não. Một số dạng tín
hiệu điện não phổ biến là:
- Alpha: Tần số 8-13 Hz, biên độ 20-100 microvolt, dạng
hình sin, phân bố vùng đỉnh, thái dương sau, chẩm. Alpha
dạng tín hiệu điện không liên quan đến sự tỉnh táo hay chủ
động của người. Alpha xuất hiện khi người trong trạng thái
thoải mái, giảm căng thẳng hay ngủ say.
- Theta: Tần số từ 4-7.5 Hz, biên độ 30-60 microvolt. Theta
là dạng tín hiệu điện liên quan đến sự sáng tạo và trí nhớ. Theta
xuất hiện khi người trong trạng thái mộng, suy nghĩ hay
học hỏi.
- Beta: Tần số lớn hơn 13Hz, biên độ < 29 microvolt, trội
vùng trán - trung tâm. Beta dạng tín hiệu điện liên quan đến
sự tỉnh táo chủ động của người. Beta xuất hiện khi người
trong trạng thái căng thẳng, lo lắng hay phản xạ.
5
- Delta: Tần số < 4Hz, biên độ thường cao. Delta là dạng tín
hiệu điện liên quan đến sự nghỉ ngơi tái tạo của não. Delta
xuất hiện khi người ở trong trạng thái ngủ sâu.
Hình 1. Cấu trúc não bộ
1.2. Tín hiệu điện não và phương pháp đo tín hiệu
từ não bộ.
Một số phương pháp khác nhau ghi lại hoạt động của não
(Hình 2), đó là:
- Chụp quang phổ cận hồng ngoại chức năng (Functional
Near-Infrared
Spectroscopy - fNIRS).
- Chụp cộng hưởng từ chức năng (functional magnetic
resonance imaging -
fMRI).
- Chụp cắt lớp phát xạ positron (Positron emission
tomography - PET).
- Từ não đồ (Magnetoencephalography - MEG).
- Điện não xâm lấn (Electro-corticography - ECoG).
- Điện não đồ (Electroencephalography - EEG).
6
Hình 2. Các phương thức thu tín hiệu từ não bộ (a) (a) fNIRS,
(b) fMRI, (c) PET, (d) MEG, (e) EcoG và (f) EEG
1.2.1. Chụp quang phổ cận hồng ngoại chức năng:
Phương pháp chụp quang phổ cận hồng ngoại chức năng
(Functional NearInfrared Spectroscopy - fNIRS). Đây là một kỹ
thuật không xâm lấn được sử dụng để đo lường hoạt động não
bằng cách theo dõi sự thay đổi trong cường độ của ánh sáng
hồng ngoại gần khi nó đi qua não. Trong quá trình hoạt động,
máy đo sẽ phát ánh sáng hồng ngoại gần vào da của đối tượng,
và sau đó, các cảm biến sẽ đo lường lượng ánh sáng được phản
xạ hoặc được hấp thụ bởi não. Những thay đổi này có thể liên
quan đến sự hoạt động của các phần khác nhau của não. fNIRS
được thực hiện dựa trên nguyên lí tia sáng ở phổ cận hồng
ngoại với bước sóng từ 700-900 nm bị hấp thụ mạnh bởi
hemoglobin (Hb) và deoxygenated-hemoglobin (deoxy-Hb) vốn
có trong máu nhưng có thể dễ dàng đi xuyên qua da, xương và
các mô tế bào. fNIRS cho phép theo dõi và phát hiện những sự
thay đổi mang tính tương đối trong lưu thông máu não dựa trên
sự khác biệt về mức độ bị hấp thụ các tia sáng ở phổ cận hồng
ngoại này.
Chứng tỏ được nhiều ưu điểm về độ chính xác chất
lượng của tín hiệu thu được, fNIRS thu hút sự quan tâm của
nhiều nhóm nghiên cứu trên thế giới nhưng Việt Nam phương
pháp này vẫn còn khá mới mẻ. Ngoài những ưu điểm trên, cản
trở lớn nhất của việc nghiên cứu phổ biến fNIRS chi psử
dụng cao, việc thiết lập hệ thống vẫn còn phức tạp. Ngoài ra
fNIRS một nhược điểm rất lớn không thể sử dụng để thăm
hoạt động não khu vực sâu hơn 4 cm do những hạn chế
7
trong khả năng phát xạ các tia cận hồng ngoại và giới hạn về độ
phân giải trong không gian.
1.2.2. Chụp Cộng hưởng từ chức năng:
Chụp cộng hưởng từ chức năng hay fMRI (Functional
magnetic resonance imaging) một kỹ thuật chẩn đoán hình
ảnh y khoa không xâm lấn dựa trên hiện tượng cộng hưởng từ
cho phép theo dõi sự thay đổi lượng oxy trong máu của não bộ,
từ đó thể phân tích được tình trạng hay hoạt động của hệ
thần kinh. Chụp cộng hưởng từ một kỹ thuật nhanh, gọn,
không sử dụng tia X, an toàn cho bệnh nhân không gây ảnh
hưởng phụ.
Về bản, fMRI một phương pháp thu hình ảnh của các
quan trong thể sống quan sát lượng nước bên trong
các cấu trúc của các quan. Ảnh cộng hưởng từ hạt nhân dựa
trên một hiện ợng vật hiện tượng cộng hưởng từ hạt
nhân. Phương pháp fMRI gồm 4 giai đoạn là sắp hàng hạt nhân,
kích thích hạt nhân, ghi nhân tín hiệu và tạo hình ảnh. Dạng phổ
biến nhất của fMRI là BOLD-fMRI (Blood oxygen level dependent
fMRI) cho phép xác định dòng máu chứa Oxy tại những vùng
khác nhau. Thiết bị đo tín hiệu hình ảnh fMRI thường kích
thướng lớn, cồng kềnh, không di chuyển được yêu cầu bất
động thể người thu tín hiệu, đây một nhược điểm lớn của
phương pháp này.
1.2.3. Chụp cắt lớp phát xạ positron:
Chụp cắt lớp phát xạ positron (Positron Emission
Tomography - PET) kỹ thuật ghi hình y học hạt nhân thể
đánh giá được mức độ chuyển hóa, hoạt động chức năng của
các tế bào trong một quan. PET được sử dụng như phương
pháp ghi hình chức năng, ghi hình chuyển hóa hay ghi hình
mức độ phân tử.
Trong PET, một chất phát xạ positron (thường glucose
đánh dấu với positron-emitting isotope) được tiêm vào thể.
Khi positron phát ra từ chất phát xạ chạm vào electron, chúng
sẽ hủy hoại lẫn nhau tạo ra hai tia gamma đối lập. Bộ dụng
cụ PET sẽ đo lường hướng năng lượng của các tia gamma
8
này để tạo ra hình ảnh về phân bố của chất phát xạ trong
thể.
Trong nghiên cứu não, PET thường được sử dụng để đo
lường sự tiêu thụ glucose trong các khu vực não khác nhau. Sự
tăng hoặc giảm tiêu thụ glucose có thể liên quan đến hoạt động
não, và do đó, PET có thể cung cấp thông tin về chức năng não.
Chụp Positron cắt lớp cho phép phát hiện nguồn năng
lượng được phóng thích bởi các hạt positron vốn là những hạt
nhỏ được hình thành khi mà chất đánh dấu phóng xạ bị phá vỡ
trong cơ thể. Tia gamma được sinh ra khi các hạt positron bị
phá vỡ và sẽ được phát hiện bởi máy quét tạo nên hình ảnh
không gian 3 chiều. Thông qua hình ảnh thu được cho thấy các
cơ quan trong cơ thể hoạt động bình thường hay bất thường.
Cũng giống như fMRI, thiết bị chụp PET thường kích
thướng lớn, cồng kềnh, không di chuyển được yêu cầu bất
động cơ thể người thu tín hiệu. Ngoài ra việc đưa chất đánh dấu
trong phức hợp đánh dấu phóng xạ vào thể người cũng
thể gây ra các tác dụng phụ không mong muốn.
1.2.4. Từ não đồ:
Từ não đồ MEG là một kỹ thuật thần kinh chức năng cho
phép lập bản đồ hoạt động của não bằng cách ghi nhận từ
trường sinh ra bởi dòng điện sinh học, có giá trị rất nhỏ, gây ra
do hoạt động của các tế bào thần kinh. MEG là một phương
pháp không xâm lấn cho phép đo sự thay đổi của trường điện từ
dựa trên hoạt động của tế bào thần kinh với độ phân giải cao
trong dải giá trị từ femto tesla (10-15T) tới pico tesla (10-12T).
Từ trường của trái đất ở cỡ 10-4 đến 10- 5 T. MEG thường được
kết hợp với phương pháp đo tín hiệu hình ảnh cộng hưởng từ
MRI, được gọi là phương pháp chẩn đoán hình ảnh dựa trên
nguồn từ trường (Magnetic source imaging - MSI) để có được
thông tin về cấu trúc não bộ tốt hơn.
Để thu được tín hiệu từ não đồ, cần phải giải quyết được
hai vấn đề đó là việc ghi nhận giá trị từ trường rất nhỏ phát ra
từ não bộ và giảm thiểu ảnh hưởng của từ trường trái đất vốn có
giá trị lớn hơn nhiều so với từ não bộ. Kỹ thuật được sử dụng để
thu tín hiệu từ não đồ là thiết bị giao thoa kế lượng tử siêu dẫn
(super-conducting quantum interference detector). Để duy trì
9
được chất siêu dẫn, môi trường được giữ ổn định ở nhiệt độ rất
thấp, khoảng 3°C sử dụng dung dịch helium.
Như vậy, từ não đồ là phương pháp đo tín hiệu não bộ
chứa nhiều thông tin, có độ phân giải và chất lượng tốt nhưng
sử dụng thiết bị khá cồng kềnh, công nghệ phức tạp dẫn đến
không di chuyển được và giá thành đắt.
1.2.5 Điện não đồ xâm lấn:
Điện não đồ xâm lấn (electro-corticography - ECoG) là một
phương pháp xâm lấn, dùng phẫu thuật mở hộp sọ để đặt các
điện cực trực tiếp lên bề mặt não bộ nhằm ghi lại các hoạt động
điện của não. Trong kĩ thuật ECoG, thường dùng các bộ điện cực
vô trùng được chế tạo từ thép không gỉ, bạch kim hoặc hợp kim
của vàng. Các điện cực thường có đường kính 5 mm được đặt
trên lưới điện cực trong suốt với khoảng cách tiêu chuẩn giữ hai
điện cực là 1 cm và được đánh số thứ tự. Các điện cực được
thiết kế một cách linh hoạt để không gây tổn thương não trong
những chuyển động nhỏ và được đặt để tiếp xúc trực tiếp trên
bề mặt não nhưng không làm tổn thương các tế bào thần kinh.
Phương pháp ECoG cho tín hiệu có độ phân giải không gian
cao hơn nhiều so với EEG. Thiết bị ghi, cụ thể là điện cực và
cách đặt điện cực ảnh hưởng lớn đến độ phân giải không gian
của kĩ thuật ECoG. Tuy có nhiều ưu điểm về chất lượng tín hiệu
nhưng do là một kĩ thuật xâm lấn đòi hỏi phẫu thuật nên ECoG
nên việc chuẩn bị và tiến hành kĩ thuật này là phức tạp hơn rất
nhiều so với các kĩ thuật khác, do đó ECoG phần lớn được chỉ
định trong điều trị y học nhiều hơn là trong nghiên cứu.
1.2.6. Điện não đồ:
Điện não đồ (Electroencephalography - EEG) là một
phương pháp phổ biến để đo lường hoạt động điện của não.
Trong quá trình này, các điện cực được đặt lên da đầu để ghi lại
các tín hiệu điện từ hoạt động của các tế bào não. EEG thường
được sử dụng để nghiên cứu các biến đổi ngắn hạn trong hoạt
động não, như sóng não theta, alpha, beta, và gamma.
EEG có khả năng ghi lại dữ liệu thời gian thực, giúp theo
dõi các sự kiện ngắn hạn và biến đổi trong hoạt động não một
cách chính xác. Độ phân giải thời gian của EEG rất cao, giúp
phân tích sự kiện xảy ra ở mức độ miligisecond. So với một số
10
phương pháp hình ảnh não khác như fMRI hay PET, EEG có chi
phí thấp, làm cho nó trở thành công cụ nghiên cứu phổ biến.
Quá trình đặt điện cực trên đầu là không đau, không xâm lấn,
và không gây nguy cơ cho người tham gia nghiên cứu.
Từ những ưu điểm trên, EEG được sử dụng rộng rãi trong
nhiều lĩnh vực như nghiên cứu tâm lý, y học, và điều trị bệnh
tâm thần.
Bên cạnh đó, EEG còn tồn tại 1 số khuyết điểm. EEG không
có độ chính xác cao trong việc xác định nguồn gốc chính xác
của tín hiệu. Điều này làm hạn chế khả năng mô hình hóa vị trí
của các khu vực não. Tín hiệu EEG có thể bị nhiễm từ các nguồn
khác như cơ bắp và hoạt động mắt, gây nhiễu loạn và giả mạo
kết quả. EEG chỉ có thể đo lường hoạt động từ các tế bào não ở
phía ngoài của não, không thể xâm nhập sâu vào các cấu trúc
bên trong.
Tóm lại, EEG là một công cụ mạnh mẽ với nhiều ưu điểm,
nhất là trong việc theo dõi sự thay đổi ngắn hạn trong hoạt
động não, nhưng cũng có nhược điểm cần được xem xét khi áp
dụng trong nghiên cứu.
Hình 3. Một số hệ thống thiết bị dùng để đo điện não EEG.
1.3. Một số phương pháp xử , phân tích tín
hiệu điện não.
1.3.1. Biến đổi wavelet:
Biến đổi wavelet phương pháp xử tín hiệu sử dụng một
tập hợp các hàm sở, được gọi các sóng nhỏ wavelet vốn
11
khi được sử dụng để phân tích tín hiệu sẽ thể hiện thông tin đầu
ra khu trú rất trên cả miền thời gian tần số. So với phép
biến đổi Fourier (sử dụng duy nhất hàm mũ), phép biến đổi
wavelet tính linh động cao thể lựa chọn các hàm
wavelet khác nhau trong họ hàm wavelet sao cho thích hợp với
bài toán (hình dạng của hàm wavelet phù hợp với tín hiệu cần
phân tích) để kết quả phân tích tốt nhất. Các hàm sở
wavelet có thể được xây dựng từ một hàm wavelet mẹ duy nhất
𝜓(𝑡) được định nghĩa như sau:
Trong đó tỉ l (nghịch đảo của tần số) dịcha 𝜏
chuyển đặc trưng vị trí. Biến đổi wavelet liên tục (Continuous
wavelet transform - CWT) của một tín hiệu ) được định nghĩa𝑥(𝑡
hệ số tương quan (correlation) giữa hàm sở wavelet
chính tín hiệu đó. CWT của ) được định nghĩa bởi công thức𝑥(𝑡
sau:
Trong đó ) biến đổi phức liên hợp của ). Phương𝜓∗(𝑡 𝜓(𝑡
trình (2) ở trên cho thấy trong phép biến đổi CWT, một sóng nhỏ
wavelet được cho đi qua tín hiệu cần phân tích. Kết quả thu
được một tập các hệ số wavelet đại diện cho hình nh trên
các bậc hay dải tần khác nhau trên miền thời gian và tần số của
tín hiệu phân tích. Tham số tỉ lệ đóng vai trò quan trọng tronga
phép biến đổi wavelet. Khi giá trị của thay đổi từ lớn xuốnga
bé, hàm sở wavelet trở nên “giãn” ra trơn hơn tương ứng
với tần số thấpn. Theo đó, các thành phần tín hiệu chứa tần
số thấp thể được phân tích với các sóng wavelet trơn như
vậy có thể đem lại thông tin phân tích hết sức hữu ích. Đặc biệt
trong điều kiện tín hiệu điện não thường bị ảnh hưởng bới các
loại nhiễu trong đó có tín hiệu bất thường do nháy mắt EOG vốn
thường xuất hiện ở giải tần thấp.
Wavelet cho phép điều chỉnh độ phân giải theo tần số
thời gian, giúp nghiên cứu tần số cụ thể hoặc các sự kiện ngắn
hạn trong tín hiệu EEG nên thường được sử dụng để nghiên
cứu các trạng thái tâm lý, như giấc ngủ, để phát hiện các
12
biến động đặc trưng trong tín hiệu EEG liên quan đến các sự
kiện như cơn co giật. Mặc Wavelet nhiều ưu điểm, nhưng
xử dữ liệu lớn thể một thách thức do yêu cầu tính toán
cao.
1.3.2. Phân tích thành phần độc lập trong khử
nhiễu tín hiệu điện não
Phương pháp phân ch thành phần độc lập (Independent
component analysis - ICA) một thuật tách nguồn
thường được sử dụng trong khử nhiễu tín hiệu điện não. Các
thuật tách nguồn thường được sử dụng phổ biến với mục
đích đánh giá các nguồn tín hiệu ban đầu từ tập hợp các tín
hiệu trộn của chúng dù không có hoặc có rất ít thông tin về quá
trình trộn cũng như tín hiệu gốc ban đầu. Ý tưởng của phương
pháp ICA dựa trên việc coi mỗi kênh tín hiệu thu được là kết quả
của việc trộn nhiều nguồn tín hiệu gốc.
Quá trình trộn sử dụng một ma trận trộn (kí hiệu là W )
-1
được mô tả bằng công thức x= W *s
-1
Trong đó:
-x các tín hiệu thu được mỗi điểm đặt điện cực trên
vỏ da đầu.
-s là tín hiệu trộn của nhiều nguồn tín hiệu gốc nằm bên
trong bộ não.
nh ICA bản yêu cầu các giả thiết sau phải được thỏa
mãn:
- Các nguồn tín hiệu ban đầu phải độc lập thống kê với nhau.
- Không nguồn nào phân b Gauss, hoặc tối đa chỉ 1
nguồn có phân bố Gauss.
- Ma trận trộn W ma trận vuông (số tín hiệu nguồn bằng số
-1
tín hiệu trộn).
nhiều thuật toán để thực hiện phương pháp ICA như
infomax, FastICA, JADE... Về mặt toán học, các giả thiết ban đầu
của hình ICA tuyến tính thể đặt vào trường hợp của tín
hiệu EEG không làm thay đổi bản chất của tín hiệu. Trong
phân tích tín hiệu điện não EEG, phương pháp ICA được sử dụng
nhiều nhất trong xử nhiễu, đặc biệt tín hiệu bất thường do
13
| 1/77

Preview text:

BỘ GIÁO DỤC VÀ ĐÀO TẠO
TRƯỜNG ĐẠI HỌC SƯ PHẠM KỸ THUẬT TP.HCM
KHOA CÔNG NGHỆ TÔNG TIN
BÁO CÁO TOÀN VĂN NHẬP MÔN CÔNG NGHỆ THÔNG TIN
Đề bài: Brain – Computer Interface
Giảng viên hướng dẫn: Đinh Công Đoan Nhóm thực hiện: Nhóm 3 Lớp: 231INIT130185_07
Tp Hồ Chí Minh, ngày 7 tháng 12 năm 2023 DANH SÁCH NHÓM Mức độ Phân công Họ và tên MSSV hoàn Nhiệm vụ thành Soạn đề cương, phần mở đầu và Nguyễn Quốc
231102 tổng hợp, chỉnh 100 % Khánh 39 sửa báo cáo, thuyết trình. Soạn chương 1, soạn đề cương, 231103 Mai Hồng Tín nhiệm vụ của luận 100 % 42 văn, chỉnh sửa báo cáo. Nông Thị Ngọc 231103 Soạn chương 3 100 % Châm 74 231102 Cáp Thanh Nhàn Soạn chương 2 100 % 76 Phạm Thị Tuyết 231102 Soạn PowerPoint 100 % Minh 68 Soạn chương 4, Nguyễn Thành
231103 kết luận và kiến 100 % Tài 09 nghị MỤC LỤC PHẦN MỞ
ĐẦU……………………………………………………………………………...1 1. Tính cấp
thiết………………………………………………………………………………1
2. Mục tiêu của luận

án………………………………………………………………………2
3. Cách tiếp cận và phương pháp nghiên

cứu………………………………………………3
4. Phân tích những công trình có liên

quan………………………………………………...3
5. Kết quả dự kiến đạt

được…………………………………………………………………3
CHƯƠNG 1. TỔNG QUAN VỀ TÍN HIỆU ĐIỆN NÃO VÀ XỬ LÝ, PHÂN
TÍCH TÍN HIỆU ĐIỆN
NÃO…………………………………………………………………………….4
1.1 Giới thiệu tổng quát về tín hiệu điện

não………………………………………………4
1.2 Tín hiệu điện não và phương pháp đo tín hiệu từ não

bộ……………………………..5
1.2.1 Chụp quang phổ cận hồng ngoại chức
năng…………………………….6
1.2.2. Chụp Cộng hưởng từ chức
năng………………………………………...6
1.2.3. Chụp cắt lớp phát xạ
positron…………………………………………...7 1.2.4. Từ não
đồ……………………………………………………………….....7
1.2.5 Điện não đồ xâm
lấn……………………………………………………....8 1.2.6. Điện não
đồ………………………………………………………………..8
1.3. Một số phương pháp xử lý, phân tích tín hiệu điện
não………………………9 1.3.1. Biến đổi
wavelet………………………………………………………..9
1.3.2. Phân tích thành phần độc lập trong khử nhiễu tín
hiệu điện não….10 1.3.3 Mạng Nơron
wavelet…………………………………………………..11
1.4. Một số ứng dụng hệ giao diện não máy
tính…………………………………..12 1.4.1 Hệ
BCI2000…………………………………………………………….12
1.4.2 Hệ VR-BCI trong phục hồi chức

năng……………………………….13
1.4.3 Một số hệ BCI trong đánh vần kí

tự………………………………….13
1.5 Kết luận chương 1
…………………………………………………………………..….15
CHƯƠNG 2. PHƯƠNG PHÁP HỌC SÂU TỰ MÃ HÓA THƯA WAVELET
TRONG KHỬ TÍN HIỆU ĐIỆN NÃO BẤT THƯỜNG DO NHÁY
MẮT………………………..16 2.1 Đặt vấn
đề…………………………………………………………………………16
2.2 Đề xuất phương pháp học sâu tự mã hóa thưa

wavelet…………………………17
2.2.1 Mạng học sâu tự mã hóa
thưa……………………………………….18
2.3 Phương pháp dò đếm EOG dựa trên biến đổi wavelet
Haar……………………19
2.3.1 Biến đổi wavelet
Haar………………………………………………..19
2.3.2 Thuật toán dò tìm EOG dựa trên biến đổi wavelet Haar………….20
2.4. Mạng học sâu tự mã hóa thưa wavelet trong khử
EOG…………………………….22

2.4.1. Huấn luyện tự
động………………………………………………22
2.4.2 Tự động sửa lỗi tín

hiệu……………………………………………..23
2.5 Độ đo đánh giá kết
quả…………………………………………………………….23 2.6 Kết
quả……………………………………………………………………………...24
2.6.1 Dữ liệu kiểm
thử……………………………………………………...24
2.6.2 Thiết kế thí
nghiệm…………………………………………………..25 2.7 Kết quả thí
nghiệm…………………………………………………………………25
2.7.1 Kết quả trên Tập dữ liệu 1: thực hiện nhiệm vụ chú ý quan sát…25
2.7.2 Kết quả trên Tập dữ liệu 2: nhận dạng trạng thái suy nghĩ………29
2.7.3 Kết quả trên tập dữ liệu 3: tín hiệu điện não mô phỏng chứa
nhiễu………………………………………………………………………………………… 33 2.8 Thảo
luận…………………………………………………………………………...34
2.9 Kết luận Chương

2…………………………………………………………………36
CHƯƠNG 3. ĐỀ XUẤT MỘT SỐ PHƯƠNG PHÁP PHÂN LOẠI TÍN HIỆU
ĐIỆN NÃO DỰA TRÊN HỌC
MÁY…………………………………………………………….37
3.1 Đặt vấn đề…………………………………………………………………….
…...37
3.2 Cơ sở dữ liệu thử

nghiệm………………………………………………………...37
3.3 Đề xuất một số phương pháp phân loại trạng thái suy

nghĩ dựa trên học
máy………………………………………………………………………………………….. 38
3.4 Kết quả và thảo

luận………………………………………………………………40
3.5 Kết luận chương

3…………………………………………………………………42
CHƯƠNG 4. ĐỀ XUẤT HỆ GIAO DIỆN NÃO MÁY TÍNH TRONG ĐIỀU

KHIỂN CÁC THIẾT BỊ ĐIỆN TỬ GIA DỤNG THÔNG
MINH………………………………...44
4.1 Hệ giao diện não máy tính trong điều khiển thiết bị điện
tử gia dụng thông
minh………………………………………………………………………………………… 44
4.1.1 Khối thu tín hiệu và thiết bị Emotiv
Epoc………………………….44 4.1.2 Khối
DSP……………………………………………………………..46
4.1.3 Khối WioT…………………………………………………………… 47
4.2 Đề xuất mô hình học cộng đồng dạng xếp ngăn trong

phân loại tín hiệu điện não cho hệ giao
diện não máy tính trong
điều khiển các thiết bị điện tử gia dụng thông
minh………………………………………………………………………………………… 48
4.3 Kết quả và thảo

luận……………………………………………………………...51
4.4 Kết luận Chương

4……………………………………………………………..…54
PHẦN KẾT LUẬN VÀ KIẾN

NGHỊ……………………………………………………..55 TÀI LIỆU THAM
KHẢO………………………………………………………………....59 PHẦN MỞ ĐẦU 1.Tính cấp thiết
Não bộ là một trong những cơ quan quan trọng nhất, về cơ
bản chịu trách nhiệm điều phối toàn bộ các cơ quan khác trong
cơ thể con người. Cơ chế hoạt động của não bộ là một vấn đề
rất phức tạp, đến nay khoa học chưa có lời giải rõ ràng. Nếu não
bộ hoạt động không bình thường có thể do các vấn đề tâm lý
hay xáo trộn về cấu trúc sinh học, một số bệnh liên quan có thể
xuất hiện như suy giảm trí nhớ, tự kỷ/trầm cảm, Parkinson, đột
qụy… Tín hiệu điện não là một cách tiếp cận phù hợp để có thể
đánh giá tình trạng của não bộ trong các trường hợp kể trên do
chất lượng tín hiệu tốt, độ phân giải cao, tính linh động của thiết
bị, an toàn và giá thành hợp lý trong điều kiện Việt Nam nếu so
sánh với các phương pháp thu tín hiệu từ não bộ khác như chụp
cộng hưởng từ, chụp cắt lớp, điện não đồ xâm lấn…
Tín hiệu điện não hay sóng điện não (Electroencephalogram
– EEG) là các giá trị điện thế có giá trị rất nhỏ, tạo ra bởi quá
trình tương tác với nhau của các tế bào thần kinh trong não. Tín
hiệu EEG thường có biên độ trong khoảng từ 10 µV đến 100 µV
và tần số trong dải từ 1 Hz đến 100 Hz. Tín hiệu EEG không tuân
theo phân bố Gauss thông thường và cũng không tĩnh
(nonstationary). Thông thường, tín hiệu EEG cho biết thông tin
về các hoạt động theo nhịp (rhythmic activities) trên các dải tần
số khác nhau như dải tần Delta (0.5–4 Hz), Theta (4-8 Hz), Alpha
(8-13 Hz), Beta (13-30 Hz) và Gamma (30-50 Hz). Phân tích tín
hiệu EEG có thể dẫn đến một số phát hiện như: nhịp Delta
thường được thu được ở các trẻ nhỏ dưới 1 tuổi và trong trạng
thái ngủ sâu của người lớn; nhịp Theta tồn tại ở trẻ em nhỏ dưới
7 tuổi hoặc trẻ em bình thường hoặc ở người lớn trong trạng
thái buồn ngủ hoặc đang ngủ; một lượng lớn tín hiệu nhịp Theta
thu được ở người lớn trong trạng thái tỉnh táo là dấu hiệu cảnh
báo tình trạng bất thường hoặc dấu hiệu bị bệnh...
Một số ứng dụng của hệ BCI có thể kể đến trong việc hỗ trợ
phục hồi chức năng của người bị liệt nửa người do chấn thương
tủy sống [1], cho phép người sử dụng điều khiển các nhân vật
hoạt họa di chuyển trong một trò chơi điện tử dựa trên Xung
phản ứng kích thích thị giác trạng thái ổn định [2], điều khiển con chuột máy tính [3]. 1
Học máy là các phương pháp tính toán thông minh cho
phép máy tính tạo ra các mô hình toán học có tham số hình
thành bởi quá trình khai phá, huấn luyện với dữ liệu gán nhãn
(học có giám sát) hoặc không cần gán nhãn (học không giám
sát). Học sâu hay mạng nơ-ron nhân tạo sâu (deep neural
network) với các cấu trúc khác nhau như mạng niềm tin (deep
belief net), máy tự mã hóa thưa (autoencoder), mạng tích chập
(convolutional neural network), mạng sinh đối nghịch
(generative adversarial networks)... là các thuật toán học máy
được ứng dụng rất thành công trong nhiều lĩnh vực. Các thuật
toán học sâu khi có nhiều dữ liệu để huấn luyện sẽ càng trở nên
hiệu quả trong việc thực hiện chức năng được “dạy”. Kết quả
thực nghiệm trong luận án này mới chỉ tiến hành trên một tập
dữ liệu quy mô nhỏ, tuy nhiên việc sử dụng các phương pháp
học sâu là bước chuẩn bị
sẵn sàng để triển khai công nghệ đề xuất cho các bài toán
thực tế, khi có lượng lớn dữ liệu. Dựa trên những phân tích ở
trên, việc nghiên cứu và phát triển các phương pháp xử lý và
phân loại tín hiệu điện não, hướng đến áp dụng các phương
pháp này trong một hoặc một số ứng dụng cụ thể là một vấn đề
nghiên cứu có ý nghĩa khoa học và thực tiễn cao, rất cần thiết
được tập trung nghiên cứu một cách kỹ lưỡng.
2. Mục tiêu của luận án
Luận án đặt ra một số mục tiêu như sau:
- Phát triển phương pháp để tăng cường chất lượng điện não
dựa trên học máy: Với vai trò là thông tin đầu vào, chất lượng
của bản ghi tín hiệu điện não rất quan trọng, ảnh hưởng đến
chất lượng xử lý và phân loại tín hiệu của hệ xử lý, phân tích tín
hiệu điện não. Do đó, việc tăng cường chất lượng điện não, cụ
thể là loại bỏ thành phần tín hiệu điện não không mong muốn
trong đó tín hiệu điện não bất thường sinh ra do nháy mắt
(Electrooculography – EOG), là một cách tiếp cận phù hợp để
tăng hiệu quả hoạt động của hệ BCI cũng như các hệ thống
phân tích tính hiệu điện não khác.
- Phát triển các phương pháp trong phân tích, xử lý tín hiệu
điện não dựa trên các phương pháp học máy trong đó bao gồm
việc kiểm thử các phương pháp học có giám sát và không giám
sát dựa trên SVM, ANN, DNN, Học cộng đồng: Đối với các 2
phương pháp phân tích tín hiệu điện não dựa trên học có giám
sát, kết quả phân loại tín hiệu sẽ cho thấy mô hình đã được
huấn luyện có thể học và làm tốt đến đâu với 14 dữ liệu tín hiệu
điện não đầu vào đã được gán nhãn. Trong trường hợp xử lý tín
hiệu điện não với phương pháp học không giám sát, luận án sẽ
kiểm chứng việc một thuật toán học máy trong trường hợp cụ
thể có thể làm tốt đến đâu khi đã biết nhiệm vụ nhưng chưa
thực sự thực hiện nhiệm vụ này bao giờ.
- Phát triển một qui trình thu nhận dữ liệu với thiết kế thí
nghiệm riêng để đảm bảo phù hợp với hệ thống BCI có khả năng
điều khiển các thiết bị điện tử gia dụng thông minh: Hiện nay,
rất nhiều nghiên cứu về xử lý, phân tích tín hiệu điện não trên
thế giới sử dụng tập dữ liệu có sẵn được công bố miễn phí và
rộng rãi. Tuy nhiên cách tiếp cận này có một nhược điểm là dữ
liệu thu trước không phải lúc nào cũng phù hợp với nội dung của
nghiên cứu. Một số nghiên cứu khác chủ động tiến hành thu
nhận và sử dụng dữ liệu thu được. Để thực hiện hệ BCI như vậy,
nghiên cứu trong khuôn khổ luận án này đã phát triển một qui
trình thu nhận dữ liệu với thiết kế thí nghiệm riêng để đảm bảo
phù hợp với hệ thống BCI có khả năng điều khiển các thiết bị
điện tử gia dụng thông minh.
3. Cách tiếp cận và phương pháp nghiên cứu:
Đối tượng nghiên cứu: Nghiên cứu sẽ tập trung vào việc
khảo sát và phân tích tín hiệu điện não, cũng như xác định
khả năng ứng dụng của chúng trong BCI. 
Phạm vi nghiên cứu: Từ việc đánh giá và so sánh các
phương pháp xử lý tín hiệu, đến việc đề xuất mô hình hệ
thống BCI trong điều khiển máy móc.
4. Phân tích những công trình có liên quan:
Chúng ta sẽ tiến hành phân tích kỹ lưỡng những nghiên
cứu, công trình liên quan đã được thực hiện trước đó về BCI và
ứng dụng của nó trong điều khiển máy móc. Điều này sẽ giúp
định hình được nền tảng kiến thức và hiểu rõ sâu hơn về trạng
thái hiện tại của lĩnh vực này.
5. Kết quả dự kiến đạt được: 3
Kết quả dự kiến của luận văn này sẽ là việc áp dụng kiến
thức từ các nghiên cứu, đề xuất các phương pháp mới và tiến bộ
trong việc xây dựng giao diện não máy tính để tạo ra một hệ
thống BCI có khả năng điều khiển máy móc bằng ý nghĩ một
cách hiệu quả và đáng tin cậy. 4
CHƯƠNG 1: TỔNG QUAN VỀ TÍN HIỆU ĐIỆN NÃO VÀ
XỬ LÝ, PHÂN TÍCH TÍN HIỆU ĐIỆN NÃO
1.1. Giới thiệu tổng quát về tín hiệu điện não.
Bộ não, trung tâm điều khiển của hệ thần kinh trung ương,
đóng vai trò rất quan trọng trong việc điều phối các hoạt động
của các cơ quan khác và sản sinh ra ý thức. Não bộ (Hình 1) có
khoảng 100 tỉ tế bào thần kinh và là một trong những bộ phận
sinh học phức tạp nhất trong trong cơ thể con người. Tìm hiểu
về cấu trúc của não bộ cũng như cách thức não bộ truyền nhận
thông tin là một lĩnh vực chứa nhiều tiềm năng đem tới những
phát kiến khoa học lớn. Để thực hiện được việc đó, một trong
những việc đầu tiên và quan trọng nhất là phải thu nhận được
những tín hiệu/thông tin do não bộ sản sinh hay còn được gọi là
tín hiệu điện não. Tín hiệu điện não là các sóng điện được phát
ra bởi các tế bào thần kinh trong não, có thể được ghi lại và
phân tích bằng các thiết bị như điện cực, máy đo điện não đồ
(EEG) hay máy đo điện thế não (MEG). Tín hiệu điện não có thể
phản ánh các hoạt động của não, như ngủ, thức, tập trung, học
tập, cảm xúc hay các rối loạn thần kinh. Tín hiệu điện não có
nhiều dạng khác nhau theo tần số và biên độ, mỗi dạng có ý
nghĩa riêng về chức năng và trạng thái của não. Một số dạng tín
hiệu điện não phổ biến là:
- Alpha: Tần số 8-13 Hz, biên độ 20-100 microvolt, có dạng
hình sin, phân bố rõ vùng đỉnh, thái dương sau, chẩm. Alpha là
dạng tín hiệu điện không liên quan đến sự tỉnh táo hay chủ
động của người. Alpha xuất hiện khi người ở trong trạng thái
thoải mái, giảm căng thẳng hay ngủ say.
- Theta: Tần số từ 4-7.5 Hz, biên độ 30-60 microvolt. Theta
là dạng tín hiệu điện liên quan đến sự sáng tạo và trí nhớ. Theta
xuất hiện khi người ở trong trạng thái mơ mộng, suy nghĩ hay học hỏi.
- Beta: Tần số lớn hơn 13Hz, biên độ < 29 microvolt, trội ở
vùng trán - trung tâm. Beta là dạng tín hiệu điện liên quan đến
sự tỉnh táo và chủ động của người. Beta xuất hiện khi người ở
trong trạng thái căng thẳng, lo lắng hay phản xạ. 5
- Delta: Tần số < 4Hz, biên độ thường cao. Delta là dạng tín
hiệu điện liên quan đến sự nghỉ ngơi và tái tạo của não. Delta
xuất hiện khi người ở trong trạng thái ngủ sâu. Hình 1. Cấu trúc não bộ
1.2. Tín hiệu điện não và phương pháp đo tín hiệu từ não bộ.
Một số phương pháp khác nhau ghi lại hoạt động của não (Hình 2), đó là:
- Chụp quang phổ cận hồng ngoại chức năng (Functional Near-Infrared Spectroscopy - fNIRS).
- Chụp cộng hưởng từ chức năng (functional magnetic resonance imaging - fMRI).
- Chụp cắt lớp phát xạ positron (Positron emission tomography - PET).
- Từ não đồ (Magnetoencephalography - MEG).
- Điện não xâm lấn (Electro-corticography - ECoG).
- Điện não đồ (Electroencephalography - EEG). 6
Hình 2. Các phương thức thu tín hiệu từ não bộ (a) (a) fNIRS,
(b) fMRI, (c) PET, (d) MEG, (e) EcoG và (f) EEG
1.2.1. Chụp quang phổ cận hồng ngoại chức năng:
Phương pháp chụp quang phổ cận hồng ngoại chức năng
(Functional NearInfrared Spectroscopy - fNIRS). Đây là một kỹ
thuật không xâm lấn được sử dụng để đo lường hoạt động não
bằng cách theo dõi sự thay đổi trong cường độ của ánh sáng
hồng ngoại gần khi nó đi qua não. Trong quá trình hoạt động,
máy đo sẽ phát ánh sáng hồng ngoại gần vào da của đối tượng,
và sau đó, các cảm biến sẽ đo lường lượng ánh sáng được phản
xạ hoặc được hấp thụ bởi não. Những thay đổi này có thể liên
quan đến sự hoạt động của các phần khác nhau của não. fNIRS
được thực hiện dựa trên nguyên lí tia sáng ở phổ cận hồng
ngoại với bước sóng từ 700-900 nm bị hấp thụ mạnh bởi
hemoglobin (Hb) và deoxygenated-hemoglobin (deoxy-Hb) vốn
có trong máu nhưng có thể dễ dàng đi xuyên qua da, xương và
các mô tế bào. fNIRS cho phép theo dõi và phát hiện những sự
thay đổi mang tính tương đối trong lưu thông máu não dựa trên
sự khác biệt về mức độ bị hấp thụ các tia sáng ở phổ cận hồng ngoại này.
Chứng tỏ được nhiều ưu điểm về độ chính xác và chất
lượng của tín hiệu thu được, fNIRS thu hút sự quan tâm của
nhiều nhóm nghiên cứu trên thế giới nhưng ở Việt Nam phương
pháp này vẫn còn khá mới mẻ. Ngoài những ưu điểm trên, cản
trở lớn nhất của việc nghiên cứu phổ biến fNIRS là ở chi phí sử
dụng cao, việc thiết lập hệ thống vẫn còn phức tạp. Ngoài ra
fNIRS có một nhược điểm rất lớn là không thể sử dụng để thăm
dò hoạt động não ở khu vực sâu hơn 4 cm do những hạn chế 7
trong khả năng phát xạ các tia cận hồng ngoại và giới hạn về độ
phân giải trong không gian.
1.2.2. Chụp Cộng hưởng từ chức năng:
Chụp cộng hưởng từ chức năng hay fMRI (Functional
magnetic resonance imaging) là một kỹ thuật chẩn đoán hình
ảnh y khoa không xâm lấn dựa trên hiện tượng cộng hưởng từ
cho phép theo dõi sự thay đổi lượng oxy trong máu của não bộ,
từ đó có thể phân tích được tình trạng hay hoạt động của hệ
thần kinh. Chụp cộng hưởng từ là một kỹ thuật nhanh, gọn,
không sử dụng tia X, an toàn cho bệnh nhân và không gây ảnh hưởng phụ.
Về cơ bản, fMRI là một phương pháp thu hình ảnh của các
cơ quan trong cơ thể sống và quan sát lượng nước bên trong
các cấu trúc của các cơ quan. Ảnh cộng hưởng từ hạt nhân dựa
trên một hiện tượng vật lý là hiện tượng cộng hưởng từ hạt
nhân. Phương pháp fMRI gồm 4 giai đoạn là sắp hàng hạt nhân,
kích thích hạt nhân, ghi nhân tín hiệu và tạo hình ảnh. Dạng phổ
biến nhất của fMRI là BOLD-fMRI (Blood oxygen level dependent
fMRI) cho phép xác định dòng máu chứa Oxy tại những vùng
khác nhau. Thiết bị đo tín hiệu hình ảnh fMRI thường có kích
thướng lớn, cồng kềnh, không di chuyển được và yêu cầu bất
động cơ thể người thu tín hiệu, đây là một nhược điểm lớn của phương pháp này.
1.2.3. Chụp cắt lớp phát xạ positron:
Chụp cắt lớp phát xạ positron (Positron Emission
Tomography - PET) là kỹ thuật ghi hình y học hạt nhân có thể
đánh giá được mức độ chuyển hóa, hoạt động chức năng của
các tế bào trong một cơ quan. PET được sử dụng như phương
pháp ghi hình chức năng, ghi hình chuyển hóa hay ghi hình ở mức độ phân tử.
Trong PET, một chất phát xạ positron (thường là glucose
đánh dấu với positron-emitting isotope) được tiêm vào cơ thể.
Khi positron phát ra từ chất phát xạ chạm vào electron, chúng
sẽ hủy hoại lẫn nhau và tạo ra hai tia gamma đối lập. Bộ dụng
cụ PET sẽ đo lường hướng và năng lượng của các tia gamma 8
này để tạo ra hình ảnh về phân bố của chất phát xạ trong cơ thể.
Trong nghiên cứu não, PET thường được sử dụng để đo
lường sự tiêu thụ glucose trong các khu vực não khác nhau. Sự
tăng hoặc giảm tiêu thụ glucose có thể liên quan đến hoạt động
não, và do đó, PET có thể cung cấp thông tin về chức năng não.
Chụp Positron cắt lớp cho phép phát hiện nguồn năng
lượng được phóng thích bởi các hạt positron vốn là những hạt
nhỏ được hình thành khi mà chất đánh dấu phóng xạ bị phá vỡ
trong cơ thể. Tia gamma được sinh ra khi các hạt positron bị
phá vỡ và sẽ được phát hiện bởi máy quét tạo nên hình ảnh
không gian 3 chiều. Thông qua hình ảnh thu được cho thấy các
cơ quan trong cơ thể hoạt động bình thường hay bất thường.
Cũng giống như fMRI, thiết bị chụp PET thường có kích
thướng lớn, cồng kềnh, không di chuyển được và yêu cầu bất
động cơ thể người thu tín hiệu. Ngoài ra việc đưa chất đánh dấu
trong phức hợp đánh dấu phóng xạ vào cơ thể người cũng có
thể gây ra các tác dụng phụ không mong muốn. 1.2.4. Từ não đồ:
Từ não đồ MEG là một kỹ thuật thần kinh chức năng cho
phép lập bản đồ hoạt động của não bằng cách ghi nhận từ
trường sinh ra bởi dòng điện sinh học, có giá trị rất nhỏ, gây ra
do hoạt động của các tế bào thần kinh. MEG là một phương
pháp không xâm lấn cho phép đo sự thay đổi của trường điện từ
dựa trên hoạt động của tế bào thần kinh với độ phân giải cao
trong dải giá trị từ femto tesla (10-15T) tới pico tesla (10-12T).
Từ trường của trái đất ở cỡ 10-4 đến 10- 5 T. MEG thường được
kết hợp với phương pháp đo tín hiệu hình ảnh cộng hưởng từ
MRI, được gọi là phương pháp chẩn đoán hình ảnh dựa trên
nguồn từ trường (Magnetic source imaging - MSI) để có được
thông tin về cấu trúc não bộ tốt hơn.
Để thu được tín hiệu từ não đồ, cần phải giải quyết được
hai vấn đề đó là việc ghi nhận giá trị từ trường rất nhỏ phát ra
từ não bộ và giảm thiểu ảnh hưởng của từ trường trái đất vốn có
giá trị lớn hơn nhiều so với từ não bộ. Kỹ thuật được sử dụng để
thu tín hiệu từ não đồ là thiết bị giao thoa kế lượng tử siêu dẫn
(super-conducting quantum interference detector). Để duy trì 9
được chất siêu dẫn, môi trường được giữ ổn định ở nhiệt độ rất
thấp, khoảng 3°C sử dụng dung dịch helium.
Như vậy, từ não đồ là phương pháp đo tín hiệu não bộ
chứa nhiều thông tin, có độ phân giải và chất lượng tốt nhưng
sử dụng thiết bị khá cồng kềnh, công nghệ phức tạp dẫn đến
không di chuyển được và giá thành đắt.
1.2.5 Điện não đồ xâm lấn:
Điện não đồ xâm lấn (electro-corticography - ECoG) là một
phương pháp xâm lấn, dùng phẫu thuật mở hộp sọ để đặt các
điện cực trực tiếp lên bề mặt não bộ nhằm ghi lại các hoạt động
điện của não. Trong kĩ thuật ECoG, thường dùng các bộ điện cực
vô trùng được chế tạo từ thép không gỉ, bạch kim hoặc hợp kim
của vàng. Các điện cực thường có đường kính 5 mm được đặt
trên lưới điện cực trong suốt với khoảng cách tiêu chuẩn giữ hai
điện cực là 1 cm và được đánh số thứ tự. Các điện cực được
thiết kế một cách linh hoạt để không gây tổn thương não trong
những chuyển động nhỏ và được đặt để tiếp xúc trực tiếp trên
bề mặt não nhưng không làm tổn thương các tế bào thần kinh.
Phương pháp ECoG cho tín hiệu có độ phân giải không gian
cao hơn nhiều so với EEG. Thiết bị ghi, cụ thể là điện cực và
cách đặt điện cực ảnh hưởng lớn đến độ phân giải không gian
của kĩ thuật ECoG. Tuy có nhiều ưu điểm về chất lượng tín hiệu
nhưng do là một kĩ thuật xâm lấn đòi hỏi phẫu thuật nên ECoG
nên việc chuẩn bị và tiến hành kĩ thuật này là phức tạp hơn rất
nhiều so với các kĩ thuật khác, do đó ECoG phần lớn được chỉ
định trong điều trị y học nhiều hơn là trong nghiên cứu.
1.2.6. Điện não đồ:
Điện não đồ (Electroencephalography - EEG) là một
phương pháp phổ biến để đo lường hoạt động điện của não.
Trong quá trình này, các điện cực được đặt lên da đầu để ghi lại
các tín hiệu điện từ hoạt động của các tế bào não. EEG thường
được sử dụng để nghiên cứu các biến đổi ngắn hạn trong hoạt
động não, như sóng não theta, alpha, beta, và gamma.
EEG có khả năng ghi lại dữ liệu thời gian thực, giúp theo
dõi các sự kiện ngắn hạn và biến đổi trong hoạt động não một
cách chính xác. Độ phân giải thời gian của EEG rất cao, giúp
phân tích sự kiện xảy ra ở mức độ miligisecond. So với một số 10
phương pháp hình ảnh não khác như fMRI hay PET, EEG có chi
phí thấp, làm cho nó trở thành công cụ nghiên cứu phổ biến.
Quá trình đặt điện cực trên đầu là không đau, không xâm lấn,
và không gây nguy cơ cho người tham gia nghiên cứu.
Từ những ưu điểm trên, EEG được sử dụng rộng rãi trong
nhiều lĩnh vực như nghiên cứu tâm lý, y học, và điều trị bệnh tâm thần.
Bên cạnh đó, EEG còn tồn tại 1 số khuyết điểm. EEG không
có độ chính xác cao trong việc xác định nguồn gốc chính xác
của tín hiệu. Điều này làm hạn chế khả năng mô hình hóa vị trí
của các khu vực não. Tín hiệu EEG có thể bị nhiễm từ các nguồn
khác như cơ bắp và hoạt động mắt, gây nhiễu loạn và giả mạo
kết quả. EEG chỉ có thể đo lường hoạt động từ các tế bào não ở
phía ngoài của não, không thể xâm nhập sâu vào các cấu trúc bên trong.
Tóm lại, EEG là một công cụ mạnh mẽ với nhiều ưu điểm,
nhất là trong việc theo dõi sự thay đổi ngắn hạn trong hoạt
động não, nhưng cũng có nhược điểm cần được xem xét khi áp dụng trong nghiên cứu.
Hình 3. Một số hệ thống thiết bị dùng để đo điện não EEG.
1.3. Một số phương pháp xử lý, phân tích tín hiệu điện não.
1.3.1. Biến đổi wavelet:
Biến đổi wavelet là phương pháp xử lý tín hiệu sử dụng một
tập hợp các hàm cơ sở, được gọi là các sóng nhỏ wavelet vốn 11
khi được sử dụng để phân tích tín hiệu sẽ thể hiện thông tin đầu
ra khu trú rất rõ trên cả miền thời gian và tần số. So với phép
biến đổi Fourier (sử dụng duy nhất hàm mũ), phép biến đổi
wavelet có tính linh động cao vì có thể lựa chọn các hàm
wavelet khác nhau trong họ hàm wavelet sao cho thích hợp với
bài toán (hình dạng của hàm wavelet phù hợp với tín hiệu cần
phân tích) để kết quả phân tích là tốt nhất. Các hàm cơ sở
wavelet có thể được xây dựng từ một hàm wavelet mẹ duy nhất
𝜓(𝑡) được định nghĩa như sau:
Trong đó a là tỉ lệ (nghịch đảo của tần số) và 𝜏 là dịch
chuyển đặc trưng vị trí. Biến đổi wavelet liên tục (Continuous
wavelet transform - CWT) của một tín hiệu 𝑥(𝑡) được định nghĩa
là hệ số tương quan (correlation) giữa hàm cơ sở wavelet và
chính tín hiệu đó. CWT của 𝑥(𝑡) được định nghĩa bởi công thức sau:
Trong đó 𝜓∗(𝑡) là biến đổi phức liên hợp của 𝜓(𝑡). Phương
trình (2) ở trên cho thấy trong phép biến đổi CWT, một sóng nhỏ
wavelet được cho đi qua tín hiệu cần phân tích. Kết quả thu
được là một tập các hệ số wavelet đại diện cho hình ảnh trên
các bậc hay dải tần khác nhau trên miền thời gian và tần số của
tín hiệu phân tích. Tham số tỉ lệ a đóng vai trò quan trọng trong
phép biến đổi wavelet. Khi giá trị của a thay đổi từ lớn xuống
bé, hàm cơ sở wavelet trở nên “giãn” ra và trơn hơn tương ứng
với tần số thấp hơn. Theo đó, các thành phần tín hiệu chứa tần
số thấp có thể được phân tích với các sóng wavelet trơn như
vậy có thể đem lại thông tin phân tích hết sức hữu ích. Đặc biệt
trong điều kiện tín hiệu điện não thường bị ảnh hưởng bới các
loại nhiễu trong đó có tín hiệu bất thường do nháy mắt EOG vốn
thường xuất hiện ở giải tần thấp.
Wavelet cho phép điều chỉnh độ phân giải theo tần số và
thời gian, giúp nghiên cứu tần số cụ thể hoặc các sự kiện ngắn
hạn trong tín hiệu EEG nên nó thường được sử dụng để nghiên
cứu các trạng thái tâm lý, như giấc ngủ, và để phát hiện các 12
biến động đặc trưng trong tín hiệu EEG liên quan đến các sự
kiện như cơn co giật. Mặc dù Wavelet có nhiều ưu điểm, nhưng
xử lý dữ liệu lớn có thể là một thách thức do yêu cầu tính toán cao.
1.3.2. Phân tích thành phần độc lập trong khử
nhiễu tín hiệu điện não
Phương pháp phân tích thành phần độc lập (Independent
component analysis - ICA) là một kĩ thuật tách nguồn mù
thường được sử dụng trong khử nhiễu tín hiệu điện não. Các kĩ
thuật tách nguồn mù thường được sử dụng phổ biến với mục
đích đánh giá các nguồn tín hiệu ban đầu từ tập hợp các tín
hiệu trộn của chúng dù không có hoặc có rất ít thông tin về quá
trình trộn cũng như tín hiệu gốc ban đầu. Ý tưởng của phương
pháp ICA dựa trên việc coi mỗi kênh tín hiệu thu được là kết quả
của việc trộn nhiều nguồn tín hiệu gốc.
Quá trình trộn sử dụng một ma trận trộn (kí hiệu là W-1)
được mô tả bằng công thức x= W-1*s Trong đó:
-x là các tín hiệu thu được ở mỗi điểm đặt điện cực trên vỏ da đầu.
-s là tín hiệu trộn của nhiều nguồn tín hiệu gốc nằm bên trong bộ não.
Mô hình ICA cơ bản yêu cầu các giả thiết sau phải được thỏa mãn:
- Các nguồn tín hiệu ban đầu phải độc lập thống kê với nhau.
- Không có nguồn nào có phân bố Gauss, hoặc tối đa chỉ có 1 nguồn có phân bố Gauss.
- Ma trận trộn W-1 là ma trận vuông (số tín hiệu nguồn bằng số tín hiệu trộn).
Có nhiều thuật toán để thực hiện phương pháp ICA như
infomax, FastICA, JADE... Về mặt toán học, các giả thiết ban đầu
của mô hình ICA tuyến tính có thể đặt vào trường hợp của tín
hiệu EEG mà không làm thay đổi bản chất của tín hiệu. Trong
phân tích tín hiệu điện não EEG, phương pháp ICA được sử dụng
nhiều nhất trong xử lí nhiễu, đặc biệt là tín hiệu bất thường do 13