Phân loại gần nhất mạnh mẽ theo cách thích nghi địa phương

IEEE Transactions on Pattern Analysis and Machine Intelligence - Tập 24 Số 9 - Trang 1281-1285 - 2002
C. Domeniconi1, Jing Peng2, D. Gunopulos1
1Computer Science Department, University of California Riverside, Riverside, CA, USA
2Electrical Engineering and Computer Science Department, Tulane University, New Orleans, LA, USA

Tóm tắt

Phân loại gần nhất giả định rằng xác suất điều kiện lớp có tính chất không đổi theo từng khu vực. Giả định này trở nên không hợp lệ trong không gian nhiều chiều với các mẫu hữu hạn do tác động của curse of dimensionality. Sự thiên lệch nghiêm trọng có thể xảy ra dưới những điều kiện này khi sử dụng quy tắc gần nhất. Chúng tôi đề xuất một phương pháp phân loại gần nhất thích ứng địa phương để cố gắng giảm thiểu thiên lệch. Chúng tôi sử dụng phân tích khoảng cách chi-bình phương để tính toán một chỉ số linh hoạt nhằm tạo ra các khu vực lân cận rất thích ứng với các vị trí truy vấn. Các khu vực lân cận được kéo dài theo các chiều đặc trưng ít liên quan hơn và bị siết lại theo các chiều có ảnh hưởng lớn nhất. Kết quả là, xác suất điều kiện lớp trở nên mượt mà hơn trong các khu vực lân cận đã được điều chỉnh, từ đó có thể đạt được hiệu suất phân loại tốt hơn. Hiệu quả của phương pháp của chúng tôi được xác thực và so sánh với các kỹ thuật khác bằng cách sử dụng cả dữ liệu mô phỏng và dữ liệu thực tế.

Từ khóa

#Pattern classification #Probability

Tài liệu tham khảo

10.1162/neco.1995.7.1.72 10.1109/34.506411 friedman, 1994, Flexible Metric Nearest Neighbor Classification 10.1214/aos/1176343886 mclachlan, 1992, Discriminant Analysis and Statistical Pattern Recognition, 10.1002/0471725293 10.1016/0031-3203(90)90123-3 quinlan, 1993, C4 5 Programs for Machine Learning short, 1981, Optimal Distance Measure for Nearest Neighbor Classification, IEEE Trans Information Theory, 27, 622, 10.1109/TIT.1981.1056403 10.1080/01621459.1988.10478639 duda, 1973, Pattern Classification and Scene Analysis 10.1162/neco.1992.4.6.888 10.1007/BF00058655 10.1023/A:1006559212014 bellman, 1961, Adaptive Control Processes, 10.1515/9781400874668 10.1023/A:1006538427943