Đánh giá chương trình/ hoạt động y tế công cộng

Khái niệm về đánh giá và vai trò của đánh giá hoạt động y tế

Khái niệm

Đánh giá nhằm góp phần nâng cao chất lượng trong mọi mặt hoạt động chăm sóc sức khỏe của ngành y tế. Đánh giá là hoạt động không thể thiếu trong công tác quản lý ngành y tế, là một trong 3 chức năng cơ bản của quản lý (lập kế hoạch, thực hiện, đánh giá) hay một khâu quan trọng trong chu trình quản lý.

Đánh giá là đo lường kết quả đạt được và xem xét giá trị, hiệu quả của một hoạt động hay một chương trình y tế trong một giai đoạn kế hoạch xác định nào đó. Đánh giá nhằm rút ra các bài học kinh nghiệm và cung cấp thông tin cho các nhà quản lý, những người thực hiện hoạt động/chương trình y tế hay những người có liên quan để đưa ra các quyết định đúng đắn cho kế hoạch hoạt động tiếp theo.

Đánh giá là công việc cần thiết đối với mọi hoạt động, dịch vụ chăm sóc sức khỏe nói chung. Bất kỳ người quản lý các chương trình hay hoạt động y tế ở cấp nào, cơ sở nào cũng cần phải biết được tiến độ hoạt động, kết quả, hiệu quả của hoạt động đã đạt được, vì thế cần thực hiện đánh giá. 

Đánh giá có thể được tiến hành định kỳ hay đột xuất theo yêu cầu của công tác quản lý các hoạt động, chương trình hay dự án chăm sóc sức khỏe. Hoạt động đánh giá được thực hiện liên tục trong suốt quá trình quản lý, nhưng trong một chu kỳ hay giai đoạn kế hoạch cụ thể, đánh giá thường được thực hiện vào cuối chu kỳ hay giai đoạn. Một chu kỳ có thể dài hay ngắn tuỳ theo từng loại hoạt động/ chương trình cụ thể, ví dụ một cơ sở y tế có thể có chu kỳ kế hoạch cho các hoạt động trong thời gian 6 tháng, một năm hay lâu hơn.

Trong phạm vi quản lý của mỗi tuyến y tế có rất nhiều hoạt động, chương trình y tế cần được đánh giá. Ví dụ hàng năm nhiều chương trình mục tiêu y tế ở tuyến Trung ương, tuyến tỉnh, tuyến huyện hay tuyến xã cần được đánh giá để làm cơ sở cho lập kế hoạch y tế giai đoạn tới. Các hoạt động khám chữa bệnh của bệnh viện Trung ương, bệnh viện tỉnh, bệnh viện huyện, hoạt động của các trạm y tế cần được đánh giá, các hoạt động y tế dự phòng, hoạt động dược, cung ứng vật tư trang thiết bị cũng cần được đánh giá…

Nói khác đi nhu cầu đánh giá các hoạt động, dịch vụ y tế, chăm sóc sức khỏe ở các tuyến rất lớn và đa dạng. Thực chất của đánh giá các hoạt động, chương trình y tế cũng là các công trình nghiên cứu khoa học có giá trị nếu được thực hiện nghiêm túc, vì nó cung cấp các thông tin chính xác, cho biết các nguyên nhân của sự thành công và tồn tại, đề ra các giải pháp, kế hoạch giải quyết các vấn đề trong tương lai.   

Mục đích của đánh giá

Đánh giá nhằm xem xét kết quả cụ thể đạt được của các hoạt động, chương trình và xem xét hiệu quả của các hoạt động hay chương trình y tế đó; 

Từ kết quả đánh giá cho biết tiến độ hoạt động có đảm bảo theo kế hoạch hay không, qua đó thúc đẩy các hoạt động điều hành, giám sát chương trình.

Qua đánh giá có thể phát hiện và giải quyết các vướng mắc, khó khăn trong thực hiện các hoạt động và có thể giúp người quản lý điều chỉnh kế hoạch nếu thấy cần thiết, trong đó có phân phối lại nguồn lực cho phù hợp với điều kiện thực tế, đảm bảo thực thi được các hoạt động hay chương trình y tế.

Đánh giá là cách học có hệ thống từ các kinh nghiệm và sử dụng bài học rút ra để cải thiện các hoạt động hiện tại và thúc đẩy thực hiện kế hoạch tốt hơn, qua lựa chọn hợp lý các hoạt động trong tương lai.      

Qua đánh giá các cán bộ thực hiện hoạt động, chương trình và các nhà quản lý y tế có được các thông tin đầy đủ, chính xác, giúp cho việc ra quyết định và lập kế hoạch mới sát thực, khả thi hơn.

Đánh giá giúp các cán Bộ Y tế có thể chia sẻ những kinh nghiệm với các đồng nghiệp của mình để tránh các thiếu sót tương tự đã mắc phải trong các hoạt động hay chương trình y tế. 

Đánh giá còn đáp ứng yêu cầu của các cấp lãnh đạo, các nhà tài trợ, liên quan đến hoạt động, chương trình, dự án y tế. Khuyến khích, động viên được các cán bộ đã có những đóng góp cho sự thành công của hoạt động và có thể xem xét trách nhiệm trong thực hiện nhiệm vụ của cán Bộ Y tế.

Phân loại đánh gíá

Cách phân loại thông thường và đơn giản nhất là phân loại đánh giá theo thời gian, có thể chia làm 4 loại đánh giá như sau:

Đánh giá ban đầu

Đánh giá ban đầu được tiến hành trước khi thực hiện một hoạt động hay một chương trình can thiệp y tế hoặc một chu kỳ kế hoạch y tế. 

Mục đích của đánh giá ban đầu là thu thập và cung cấp các thông tin cần thiết làm cơ sở cho lập kế hoạch, xác định điểm xuất phát, xây dựng mục tiêu, và lập kế hoạch hành động cụ thể và phân bố nguồn lực cho hoạt động. Xác định phạm vi và xây dựng các chỉ tiêu/ chỉ số sử dụng cho đánh giá ban đầu là rất quan trọng vì đó cũng là phạm vi và chỉ số cơ bản sử dụng cho đánh giá khi kết thúc hoạt động chương trình/ dự án can thiệp. 

Đánh giá tức thời

Đánh giá trong khi thực hiện các hoạt động, chương trình can thiệp được gọi là đánh giá tức thời hay đánh giá tiến độ. Mục đích của đánh giá tức thời là xem xét tiến độ các hoạt động, các chỉ tiêu đạt được so với kế hoạch đặt ra, nhằm điều hành hoạt động chương trình tốt hơn để đảm bảo đạt được tiến độ công việc và mục tiêu ban đầu của kế hoạch đã đề ra.

Đánh giá sau cùng

Đánh giá sau cùng là đánh giá được thực hiện ngay sau khi kết thúc hoạt động chương trình can thiệp. Mục đích của đánh giá sau cùng là thu thập đủ thông tin để xem xét toàn bộ các kết quả đạt được hay sản phẩm của hoạt động hay chương trình can thiệp. So sánh kết quả đạt được với các mục tiêu, chỉ tiêu đã xây dựng, phân tích nguyên nhân thành công và thất bại cũng như giá trị, hiệu quả của hoạt động/ chương trình can thiệp. Đánh giá sau cùng chính xác, chi tiết, với các kinh nghiệm và các bài học cụ thể là rất cần thiết và có giá trị thực tiễn cho các nhà quản lý y tế xây dựng các kế hoạch hoạt động tiếp theo, nhằm đạt kết quả và hiệu quả tốt hơn. 

Đánh giá dài hạn

Thực hiện sau khi kết thúc hoạt động/ chương trình y tế một thời gian nhất định. Mục đích của đánh gía dài hạn là xem xét tác động lâu dài của hoạt động hay chương trình dự án y tế đến tình trạng bệnh tật, sức khỏe của cộng đồng. Đánh giá dài hạn thường không dễ dàng vì chúng ta đã biết có nhiều yếu tố tác động đến tình trạng sức khỏe như các yếu tố kinh tế, văn hoá xã hội, hoạt động của nhiều ngành, nhiều chương trình chứ không chỉ là tác động của các can thiệp y tế.

Đánh giá với sự tham gia của cộng đồng

Đánh giá với sự tham gia của cộng đồng là quá trình thu thập thông tin bằng phương pháp định lượng hay định tính từ cộng đồng một cách hệ thống về các hoạt động chăm sóc sức khỏe, tình hình sức khỏe, bệnh tật, các ý kiến, khuyến nghị của cộng đồng. Với các hoạt động hay chương trình y tế can thiệp tại cộng đồng thì việc cộng đồng tham gia đánh giá sẽ cung cấp cho người quản lý rất nhiều thông tin bổ ích. Sự tham gia của cộng đồng trong đánh giá hoạt động y tế còn giúp hình thành mối quan hệ tốt giữa ngành y tế, cán Bộ Y tế với cộng đồng, thúc đẩy cộng đồng tích cực tham gia trong công tác chăm sóc sức khỏe. Cán Bộ Y tế có thể biết được suy nghĩ của cộng đồng về cán Bộ Y tế, hoạt động của ngành y tế và những mong đợi của cộng đồng, của các đối tượng phục vụ. Các thông tin này sẽ rất cần cho việc rút kinh nghiệm, cải tiến các hoạt động và lập kế hoạch thực hiện các hoạt động chương trình y tế tiếp theo đáp ứng tốt hơn nhu cầu chăm sóc sức khỏe cộng đồng.  

Chỉ số trong đánh giá

Khái niệm về chỉ số

Chỉ số là công cụ, thước đo (ước lượng được, so sánh được) giúp người quản lý theo dõi đánh giá các chương trình/ hoạt động y tế. Chỉ số đồng thời cũng là các điểm mốc quan trọng giúp các nhà quản lý theo dõi, giám sát để thấy được những thay đổi xảy ra do tác động của hoạt động/ chương trình y tế. Chỉ số thường được biểu thị dưới dạng tỷ lệ, tỷ số, số trung bình để có thể ước lượng và so sánh được. Các chỉ số khi được sử dụng đều cần xác định rõ cách tính. 

Khi đánh giá một chương trình hoạt động y tế cần xác định rõ các chỉ số nào cần thu thập tính toán, thu thập chỉ số đó bằng phương pháp nào, thu thập chỉ số đó ở đâu. 

Kinh nghiệm đã chỉ ra rằng việc xây dựng các chỉ số cho đánh giá cũng như cho theo dõi, điều hành các chương trình, hoạt động y tế cần thực hiện ngay từ khi bắt đầu thực hiện hoạt động/ chương trình. Đôi khi việc xác định chính xác các chỉ số cho đánh giá không phải là dễ, nhất là các chỉ số để đánh giá tác động của chương trình hoạt động y tế. Tùy theo từng hoạt động chương trình y tế, tùy từng loại đánh giá cũng như khả năng nguồn lực mà người đánh giá quyết định sẽ chọn chỉ số nào cho phù hợp. Khi chọn các chỉ số cho đánh giá có thể xác định 3 loại chỉ số sau:

Các chỉ số đầu vào: Các chỉ số đầu vào bao gồm các con số về các nguồn lực được sử dụng cho hoạt động y tế. Ví dụ: Chi phí tính bình quân cho một người dân trong năm của huyện; tỷ lệ cán bộ các ban ngành trong xã tham gia hoạt động chăm sóc sức khỏe trẻ em…

Các chỉ số về quá trình hoạt động: Bao gồm các chỉ số cho biết tỷ lệ các hoạt động đã được thực hiện. Ví dụ: Số lớp đào tạo lại được mở cho cán Bộ Y tế thôn, xã so với chỉ tiêu kế hoạch đề ra; Số buổi khám quản lý thai đã được thực hiện tại trạm y tế xã; Tỷ lệ đối tượng đích đã tham dự đầy đủ các buổi truyền thông giáo dục sức khỏe trực tiếp…

Chỉ số đầu ra: Chỉ số đầu ra cho biết về kết quả khi kết thúc hoạt động/chương trình. Ví dụ: Số cán Bộ Y tế thôn, xã được đào tạo lại về truyền thông giáo dục sức khỏe trong năm; Tỷ lệ cán bộ được đào tạo đạt mục tiêu của khoá đào tạo lại. Chỉ số đầu ra về giảm nguy cơ mắc bệnh. Ví dụ: Số lượng và tỷ lệ trẻ em được tiêm chủng đủ 6 loại vaccin trong năm, chỉ số đầu ra về giảm hậu quả xấu đến sức khỏe (mắc bệnh, tử vong, tàn phế). Ví dụ: Giảm tỷ lệ mắc, tỷ lệ tử vong. Chỉ số đầu ra cũng có thể là chỉ số phản ánh tình trạng sức khỏe được tăng cường, tăng thể lực.

Các tiêu chuẩn cơ bản khi chọn chỉ số

Để đảm bảo đánh giá chính xác hoạt động, chương trình y tế, cần xác định các chỉ số thích hợp cho đánh giá, với việc quan tâm đến các tiêu chuẩn chính sau đây: 

Tính giá trị: Phản ánh đúng vấn đề cần đánh giá, đúng mức độ đạt được của hoạt động chương trình y tế.

Tính đáng tin cậy: Chỉ số mang tính khách quan, phản ánh đúng thực trạng của hoạt động, không có sự khác nhau khi những người khác nhau thu thập và tính toán chỉ số.

Tính nhạy: Phản ánh được kịp thời những thay đổi do kết quả thực hiện của các hoạt động, chương trình.

Có thể thực hiện được/ sát hợp (khả thi): Có đủ điều kiện để thu thập được chỉ số, phù hợp với khả năng thực tế về nguồn lực.

Kết hợp chỉ số về lượng và chất: Các chỉ số về lượng cũng quan trọng nhưng quan trọng hơn là tính các chỉ số về chất. Ví dụ: Khi đánh giá các hoạt động đào tạo có thể tính số lượng cán Bộ Y tế được đào tạo lại, nhưng quan trọng hơn là tính số lượng hay tỷ lệ cán bộ được đào tạo đạt mục tiêu của các khoá đào tạo lại.

Các nhóm chỉ số chung có thể thu thập để sử dụng cho đánh giá

Tùy theo từng chương trình, hoạt động y tế, người đánh giá quyết định chọn các chỉ số đánh giá cho phù hợp, nhưng khi chọn chỉ số cụ thể thì cần chú ý xem xét các chỉ số  trong từng nhóm chỉ số chính dưới đây để tránh bỏ sót chỉ số thích hợp.    

Nhóm chỉ số dân số;

Nhóm chỉ số về kinh tế văn hóa, xã hội, môi trường;

Nhóm chỉ số về sức khỏe, bệnh tật;

Nhóm chỉ số về nguồn lực, dịch vụ y tế.

Ví dụ về một số chỉ số cụ thể có thể chọn để đánh giá và lập kế hoạch cho công tác chăm sóc sức khỏe bà mẹ trẻ em tại một địa phương như sau:

Số phụ nữ trong độ tuổi sinh đẻ của địa phương;

Tỷ lệ cặp vợ chồng trong độ tuổi sinh đẻ thực hiện các biện pháp tránh thai.

Tỷ lệ phụ nữ có thai được theo dõi và tiêm phòng uốn ván đầy đủ trong năm.

Tỷ lệ trẻ đẻ ra trong tháng trong quý/ trong năm được cán Bộ Y tế giúp đỡ.

Tỷ lệ trẻ sơ sinh được tiêm phòng vaccin BCG.

Tỷ lệ trẻ dưới một tuổi được tiêm đủ 6 loại vaccin trong năm.

Tỷ lệ trẻ đẻ ra có cân nặng dưới 2500 gam trong năm.

Tỷ lệ trẻ dưới 1 tuổi và dưới 5 tuổi suy dinh dưỡng trong năm.

Tỷ lệ tử vong sơ sinh trong tháng, trong năm.

Các phương pháp thu thập thông tin cho đánh giá

Phương pháp thu thập thông tin định lượng

Có 3 nhóm phương pháp chính để thu thập thông tin định lượng cho đánh giá:  

Thu thập các thông tin thứ cấp qua sổ sách báo cáo: Dựa vào các sổ sách, biểu mẫu báo cáo thống kê của các cơ sở y tế ở các tuyến, người đánh giá tổng hợp thông tin và tính toán các chỉ số cần thiết. Phương pháp này dễ thực hiện nhưng thường có hạn chế là thông tin không theo ý muốn và độ tin cậy có thể không cao, không cho biết được các nguyên nhân của vấn đề cần đánh giá.

Thu thập thông tin qua phỏng vấn: Người đánh giá chuẩn bị các công cụ để phỏng vấn như các bộ câu hỏi để hỏi các đối tượng cung cấp thông tin. Đây là phương pháp thu được thông tin chính xác nhưng thường phải chuẩn bị công phu và khá tốn kém nguồn lực cho phát triển công cụ thu thập thông tin, đào tạo cán bộ tham gia và tổ chức điều tra thu thập và xử lý thông tin.

Thu thập thông tin qua quan sát: Người đánh giá xây dựng các bảng kiểm hay biểu mẫu cần thiết để thu thập thông tin. Các thông tin được ghi chép vào các bảng kiểm, biểu mẫu qua quan sát trực tiếp và sử dụng các kỹ thuật đo đạc các yếu tố môi trường, các yếu tố nguy cơ hay các yếu tố tác động đến sức khỏe, tổ chức khám lâm sàng và làm xét nghiệm cận lâm sàng để sàng lọc. Phương pháp này cho thông tin chính xác, nhưng việc tổ chức thực hiện khó khăn và cần có đủ các nguồn lực như con người, trang thiết bị máy móc, hoá chất, thuốc men. Để đảm bảo thông tin thu thập bằng phương pháp quan sát trực tiếp chính xác, những người tham gia thu thập thông tin cần phải tập huấn để thống nhất các tiêu chuẩn đánh giá thông tin cần thu thập và ghi chép vào biểu mẫu đã chuẩn bị.

Phương pháp đánh giá định tính

Thu thập thông tin định tính nhằm xác định nhanh vấn đề để gợi ý, định hướng trước khi tổ chức thu thập thông tin định lượng. Cũng có thể thu thập thông tin định tính để bổ sung thêm thông tin, giúp xác định nguyên nhân của vấn đề đằng sau các con số mà các thông tin định lượng đã cung cấp và kiểm tra lại các thông tin còn chưa rõ. Có nhiều phương pháp có thể giúp thu nhận được các thông tin định tính như tổ chức thảo luận nhóm trọng tâm, phỏng vấn sâu những người liên quan, phỏng vấn bán cấu trúc những nhà lãnh đạo quản lý y tế, lãnh đạo chính quyền, đoàn thể các cấp, đại diện dân trong cộng đồng. Sự tham gia của cộng đồng trong đánh giá định tính rất quan trọng trong công tác y tế vì chúng ta có thể biết được nguyện vọng của cộng đồng, các giải pháp đề xuất của cộng đồng để giải quyết các vấn đề sức khỏe bệnh tật, cải tiến dịch vụ y tế. 

Tùy theo khả năng và nguồn lực và vấn đề cần đánh giá mà người lập kế hoạch đánh giá chọn phương pháp thu thập thông tin nào cho thích hợp.

Các bước cơ bản của đánh giá

Chuẩn bị trước khi đánh giá

Xác định vấn đề và mục tiêu của đánh giá

Trong công tác y tế có rất nhiều hoạt động đa dạng và phức tạp. Mọi hoạt động đều cần được đánh giá để nâng cao chất lượng phục vụ, tuy nhiên nguồn lực và thời gian có hạn vì thế các nhà quản lý phải xác định các vấn đề ưu tiên cho đánh giá theo từng thời gian, từng nơi cụ thể. 

Công việc đầu tiên của đánh giá là xác định hoạt động nào, chương trình nào cần đánh giá, đánh giá đó nhằm mục tiêu gì, kết quả của đánh giá sẽ được ai sử dụng, sử dụng vào mục đích gì. Ví dụ: Tại một huyện, công tác chăm sóc trước sinh chưa tốt, để lập kế hoạch tăng cường công tác chăm sóc trước sinh trong huyện cho năm tới cần tiến hành đánh giá công tác này trong huyện nhằm mục tiêu:

Xác định những vấn đề tồn tại trong công tác chăm sóc trước sinh.

Tìm hiểu các nguyên nhân và các yếu tố ảnh hưởng tốt và chưa tốt đến công tác chăm sóc trước sinh.

Đề xuất các giải pháp để tăng cường công tác chăm sóc trước sinh trong kế hoạch những năm tới.

Việc xác định mục tiêu của đánh giá tùy thuộc vào nhu cầu ưu tiên, khả năng về nguồn lực và trình độ cán bộ tham gia đánh giá.

Xác định phạm vi đánh giá

Dựa vào vấn đề, mục tiêu đã đề ra và nhất là khả năng nguồn lực thực tế mà người quản lý xây dựng kế hoạch đánh giá cho phù hợp. Người xây dựng kế hoạch đánh giá cần trả lời rõ các câu hỏi sau: 

Đánh giá sẽ được thực hiện ở những cơ sở nào?

Đánh giá thực hiện trên địa bàn nào? 

Cần thu thập thông tin từ những đối tượng nào, nguồn nào?

Thu thập thông tin từ thời gian nào đến thời gian nào?

Chọn phạm vi đánh giá thích hợp phụ thuộc vào khả năng của người quản lý. Một nguyên tắc quan trọng là cần đảm bảo được tính giá trị, đại diện và tin cậy của thông tin thu được trong đánh giá. Sử dụng các kiến thức dịch tễ học để xác đinh phạm vi đánh giá, trong đó có xác định cỡ mẫu và phương pháp chọn mẫu là rất cần thiết để đảm bảo tính tin cậy và giá trị của kết quả đánh giá.   

Xác định các chỉ số cho đánh giá

Xác định các chỉ số nào cần thiết cho đánh giá, từ đó quyết định thiết kế các công cụ thu thập và tính toán chỉ số, đồng thời quyết định chỉ số sẽ được thu thập ở đâu, vào thời điểm nào, các phương pháp nào sử dụng để đảm bảo tính chính xác của chỉ số (xem phần chỉ số trong đánh giá).  

Xác định mô hình đánh giá 

Đánh giá cần chỉ ra được các thay đổi hay kết quả của kế hoạch hoạt động hay chương trình can thiệp. Nếu như mục tiêu và các chỉ số, chỉ tiêu của kế hoạch hoạt động hay chương trình được xây dựng rõ ngay từ khi bắt đầu hoạt động hay chương trình can thiệp thì không khó khăn trong việc chỉ ra các kết quả hay các thay đổi. Tuy nhiên chứng minh các thay đổi là do thực hiện kế hoạch hay chương trình riêng nào đó thì không phải dễ dàng vì kết quả đạt được có thể do tác động của một số yếu tố khác. 

Thông thường có hai mô hình đánh giá để có thể chỉ ra các thay đổi do thực hiện kế hoạch hoạt động hay chương trình can thiệp.

Đánh giá có sử dụng nhóm đối chứng 

Người đánh giá có thể thiết kế mô hình đánh giá với một nhóm can thiệp và một nhóm chứng, bằng cách chọn nhóm chứng càng giống với nhóm can thiệp càng tốt (đặc điểm cá nhân, địa dư, đặc điểm kinh tế, văn hoá, xã hội, điều kiện làm việc, phương tiện kỹ thuật, chuyên môn v.v…, nhóm chứng là nhóm không có hoạt động can thiệp.

Trong mô hình này trước khi thực hiện hoạt động can thiệp, cả nhóm can thiệp và nhóm không can thiệp đều được điều tra cơ bản. Sau thời gian hoạt động can thiệp cả nhóm có can thiệp và nhóm không can thiệp lại được điều tra lại. Đối tượng, phương pháp tiến hành và công cụ điều tra trước và sau can thiệp cho cả hai nhóm là giống nhau, nói cách khác các thông tin hay biến số được thu thập như nhau giữa nhóm có can thiệp và không can thiệp, giữa trước can thiệp và sau can thiệp. 

Kết quả được so sánh giữa hai nhóm sau hoạt động can thiệp. Nếu nhóm can thiệp có được kết quả tốt hơn so với nhóm không can thiệp sẽ là bằng chứng khách quan thể hiện sự thành công của chương trình can thiệp. 

Với mô hình này cũng có thể so sánh kết quả trước và sau thời gian can thiệp của nhóm có can thiệp cũng như của nhóm không can thiệp để có thêm thông tin bổ sung đánh giá kết quả của hoạt động can thiệp. 

Hình 12.1. Sơ đồ mô hình đánh giá so sánh trước sau và với nhóm chứng

Khi so sánh trước (T) và sau (S) khi can thiệp đối với nhóm có can thiệp hay so sánh T và S một thời gian cùng kỳ với thời gian can thiệp ở nhóm chứng ta có thể tính được giá trị dự phòng (Preventive value -PV). 

Giá trị PV được tính như sau:  

            |P_T -P_{S |}

PV =                        x 100 (%)

                P_T

Trong đó: P_T   = tỷ lệ hoặc giá trị trung bình ở thời điểm trước can thiệp.

P_S   = tỷ lệ hoặc giá trị trung bình ở thời điểm sau can thiệp.  

PV có thể tính bằng % hoặc bằng số tuyệt đối P_T – P_S

Trong quá trình can thiệp có thể tình hình đã thay đổi một cách tự nhiên hoặc do nhiều tác nhân khác, những tác động của thay đổi khách quan có thể đo lường được bằng giá trị PV ở nhóm chứng. Hiệu quả can thiệp (HQCT) thực sự được tính bằng PV của nhóm can thiệp trừ PV của nhóm chứng.

HQCT   = PV (Can thiệp) – PV(chứng)

Hiệu quả can thiệp có thể tính bằng giá trị tương đối (tỷ lệ %) hoặc giá trị tuyệt đối.  

Cũng có thể đánh giá một nhóm chứng với các nhóm can thiệp khác nhau. Trong phương pháp này ta có thể so sánh được hiệu quả của giải pháp can thiệp này với hiệu quả của giải pháp can thiệp khác.   

Đánh giá có nhóm chứng là một mô hình đánh giá mang tính khoa học, có giá trị cao, nhất là cho nghiên cứu thử nghiệm áp dụng những giải pháp hay hoạt động can thiệp mới. Trong thực tế các địa phương đều có kế hoạch thực hiện hoạt động hay chương trình y tế hàng năm. Các hoạt động hay chương trình y tế này thường được thực hiện trên cả địa bàn một địa phương, vì thế áp dụng mô hình đánh giá các kế hoạch hoạt động hay chương trình y tế với nhóm chứng hàng năm nhiều khi không thích hợp. Mô hình đánh giá trước sau có thể sẽ thích hợp hơn với việc thực hiện các hoạt động hay chương trình y tế khi không có đủ kinh phí và điều kiện kỹ thuật.

Mô hình đánh giá trước và sau can thiệp không có nhóm chứng

Trong mô hình này điều tra cơ bản ban đầu được thực hiện, các thông tin thu được là cơ sở để xây dựng mục tiêu của kế hoạch hay chương trình can thiệp. Sau khi thực hiện các hoạt động can thiệp, điều tra lại với các nội dung và phương pháp như điều tra cơ bản ban đầu được thực hiện, kết quả của cuộc điều tra này được so sánh với kết quả điều tra ban đầu. Các thay đổi giữa hai cuộc điều tra thường được coi là kết quả của chương trình can thiệp. Tuy nhiên người đánh giá cần thận trọng và có bằng chứng để loại trừ các nguyên nhân khác khi kết luận về những thay đổi là do hoạt động can thiệp, vì trên thực tế có thể có những thay đổi là do kết quả của các yếu tố khác chứ không phải là do kết quả của hoạt động can thiệp.  

Hình 12.2. Sơ đồ mô hình đánh giá không có nhóm chứng

Trong nhiều trường hợp không thực hiện được điều tra cơ bản ban đầu, lúc này phải dựa vào các chỉ tiêu kế hoạch để đánh giá các hoạt động y tế.

Chọn phương pháp thu thập thông tin cho đánh giá

Có thể quyết định chọn phương pháp thu thập thông tin thứ cấp qua sổ sách báo cáo, thu thập thông tin qua phỏng vấn cấu trúc hoặc bán cấu trúc hoặc thu thập thông tin qua quan sát. Tùy theo khả năng và nguồn lực và vấn đề cần đánh giá mà người lập kế hoạch đánh giá chọn phương pháp thu thập thông tin nào cho thích hợp. Có thể quyết định kết hợp nhiều phương pháp thu thập thông tin để đáp ứng được nhu cầu và mục tiêu của đánh giá đã xác định.

Lập kế hoạch cho đánh giá

Sau khi đã xác định được vấn đề, phạm vi, mục tiêu và chuẩn bị các yêu cầu kỹ thuật cho đánh giá như xác định chỉ số, phương pháp, công cụ thu thập thông tin, người lập kế hoạch cho đánh giá cần có kế hoạch cụ thể về nguồn lực cần thiết cho đánh giá bằng cách trả lời các câu hỏi cơ bản sau:

Ai sẽ tham gia vào đánh giá?

Họ cần được đào tạo như thế nào?

Kinh phí cần thiết cho đánh giá là bao nhiêu?

Các phương tiện, công cụ nào cần có phục vụ cho đánh giá?

Đánh giá cần thực hiện khi nào, thời gian cụ thể ra sao?

Lập kế hoạch chi tiết phân công nhiệm vụ đánh giá như thế nào ?

Kế hoạch cho đánh giá cần được chuẩn bị chi tiết cũng giống như khi xây dựng một bản kế hoạch hành động cụ thể.        

Thực hiện thu thập thông tin

Hoạt động quan trọng nhất của thực hiện đánh giá là tổ chức thu thập thông tin cần thiết. Các thông tin thu thập cho đánh giá cần đảm bảo các yêu cầu chung là chính xác, kịp thời và đầy đủ. Trước khi tổ chức thu thập thông tin chính thức cần kiểm tra lại các công cụ hay phương tiện thu thập thông tin một lần nữa bằng cách thử nghiệm lại các công cụ thu thập thông tin, kiểm định lại tính thực thi của kế hoạch đánh giá và sửa đổi cho thích hợp. Những người tham gia thu thập thông tin cho đánh giá còn được tập huấn trước, thông thạo các phương pháp và công cụ sử dụng cho thu thập thông tin. 

Trong quá trình thu thập thông tin cần tổ chức giám sát chặt chẽ để đảm bảo tính thống nhất, chính xác, trung thực của thông tin và giải quyết các khó khăn nảy sinh trong việc thu thập thông tin. Thông thường cứ 5 người điều tra nghiên cứu thì có một người giám sát. Người giám sát phải được đào tạo trước khi thực hiện nhiệm vụ và có trách nhiệm cao với công việc của mình.

Xử lý thông tin, trình bày kết quả đánh giá

Khi thông tin đã được thu thập đầy đủ, bước quan trọng tiếp theo là xử lý thông tin. Thông tin cần được xử lý bằng các phương pháp và chương trình thích hợp để có các số liệu, chỉ số phản ánh đúng thực chất của các chương trình hoạt động y tế theo mục tiêu đã đề ra. Các chương trình xử lý số liệu trên máy vi tính với các thuật toán thống kê thích hợp có thể được sử dụng để phân tích xử lý số liệu như EPI INFO, SPSS, STATA v.v… tùy thuộc vào khả năng và kinh nghiệm của người đánh giá.    

Kết quả của đánh giá cần được trình bày và phiên giải hợp lý bằng các bảng số liệu, các sơ đồ, biểu đồ so sánh với các bàn luận ngắn gọn và đầy đủ để giúp người đọc dễ dàng nhận ra các kết quả đạt được và vấn đề chưa đạt hay các tồn tại của hoạt động chương trình, dự án can thiệp.     

Đánh giá giá trị, hiệu quả của kết quả thu được và phân tích tại sao lại có các kết quả như vậy là nội dung hết sức quan trọng cần được thể hiện trong báo cáo đánh giá. 

Sử dụng kết quả đánh giá

Bản báo cáo đánh giá được trình bày như một bản báo cáo khoa học. Báo cáo cần nêu ra các kết luận cụ thể chính xác dựa trên các thông tin thu được, các bài học kinh nghiệm quan trọng rút ra từ kết quả hoạt động của chương trình để giúp những người khác có các kinh nghiệm cho các chương trình hoạt động y tế tương tự hay các hoạt động có liên quan trên địa bàn. 

Kết quả của báo cáo đánh giá trước tiên được những nhà quản lý, các cán bộ thực hiện hoạt động, chương trình sử dụng để xác định các vấn đề tồn tại, lập kế hoạch cho các hoạt động, chương trình trong giai đoạn kế hoạch tới của cá nhân hay đơn vị liên quan.

Kết quả đánh giá đồng thời được gửi đến cơ quan có thẩm quyền ở cấp trên kịp thời để sử dụng cho mục đích rộng hơn như ra các chính sách, quyết định mới nhằm nâng cao chất lượng, hiệu quả của các chương trình, hoạt động y tế.

Các báo cáo đánh giá hoạt động y tế cần được lưu trữ để làm cơ sở dữ liệu cho xây dựng các kế hoạch hoạt động y tế của cá nhân và đơn vị, cả trước mắt và lâu dài và làm tài liệu tham khảo cho những cá nhân hay đơn vị khác nếu cần.         

Tóm lại công tác quản lý y tế không thể thiếu hoạt động đánh giá. Đánh giá là một khâu quan trọng cần thiết cho mọi hoạt động, mọi chương trình y tế. Ngay từ khi xây dựng kế hoạch cho các hoạt động y tế cần dành các nguồn lực thích hợp cho hoạt động đánh giá. Phải thực hiện đánh giá theo kế hoạch đã xây dựng một cách nghiêm túc để đảm bảo đánh giá là một chức năng quan trọng trong quản lý các hoạt động và chương trình y tế, góp phần không ngừng tăng cường chất lượng, hiệu quả trong các hoạt động chăm sóc sức khỏe cho cộng đồng.