Comments on: (Lại) machine learning và statistics http://www.procul.org/blog/2008/12/12/l%e1%ba%a1i-machine-learning-va-statistics/ Tầm nhìn ta thật ngắn mà đã thấy bao thứ để làm -- Alan Turing Wed, 10 Mar 2010 07:15:49 +0000 http://wordpress.org/?v=2.9.2 hourly 1 By: Bach Hung Nguyen http://www.procul.org/blog/2008/12/12/l%e1%ba%a1i-machine-learning-va-statistics/comment-page-1/#comment-181316 Bach Hung Nguyen Sat, 27 Dec 2008 17:13:38 +0000 http://www.procul.org/blog/?p=908#comment-181316 Anh Long giỏi văn phết nhỉ :D, khoái câu research statement của bác. Đồng tình với quan điểm mèo trắng hay mèo đen miễn là bắt được chuột. Trong nghành em (Machine Translation & NLP) scalability & feasibility rất là quan trọng. Về scalability, em thấy rất nhiều ML paper đề xuất các ideas xong rồi chạy experiments trên các toy dataset, đến khi áp dụng vào large dataset thi chịu ko train được vì complexity quá cao. Một trong những kinh nghiệm là em build protype translation systems trên bộ dữ liệu khoảng 5 triệu từ, rồi test các kiểu algorithms thấy cũng ngon. Đến lúc áp dụng vào data khoảng 200 triệu từ thì ngắc ngoải. Về feasibility, cái này liên quan đến inference, có khá nhiều ứng dụng trong nghành của em đòi hỏi chạy real-time, ví dụ như dịch tiếng nói-sang-tiếng nói, model càng phức tạp thì càng chạy lâu mặc dù cho kết quả tốt hơn. Chẳng hạn như nếu hệ thống dịch của em mà không xài parser thì chạy nhanh hơn khoảng 3 lần nhưng kết quả dịch thấp hơn. Bình thường đi đấu đá evaluation thì model nào cho kết quả tốt nhất thì chơi, nhưng còn thực tế sử dụng phải tinh giảm đi rất nhiều. Nên cái đoạn "Computation complexity không chỉ đơn thuần là một khái niệm về hiệu quả về thời gian hay không gian của một algorithm, mà nó gắn liền với khái niệm về độ phức tạp về information, mà qua đó sẽ chi phối quyết định của một người modeler (statisticians) cho dù anh ta khách quan hay chủ quan hay không" là hơi bị chuẩn. Anh Long giỏi văn phết nhỉ :D , khoái câu research statement của bác. Đồng tình với quan điểm mèo trắng hay mèo đen miễn là bắt được chuột. Trong nghành em (Machine Translation & NLP) scalability & feasibility rất là quan trọng. Về scalability, em thấy rất nhiều ML paper đề xuất các ideas xong rồi chạy experiments trên các toy dataset, đến khi áp dụng vào large dataset thi chịu ko train được vì complexity quá cao. Một trong những kinh nghiệm là em build protype translation systems trên bộ dữ liệu khoảng 5 triệu từ, rồi test các kiểu algorithms thấy cũng ngon. Đến lúc áp dụng vào data khoảng 200 triệu từ thì ngắc ngoải. Về feasibility, cái này liên quan đến inference, có khá nhiều ứng dụng trong nghành của em đòi hỏi chạy real-time, ví dụ như dịch tiếng nói-sang-tiếng nói, model càng phức tạp thì càng chạy lâu mặc dù cho kết quả tốt hơn. Chẳng hạn như nếu hệ thống dịch của em mà không xài parser thì chạy nhanh hơn khoảng 3 lần nhưng kết quả dịch thấp hơn. Bình thường đi đấu đá evaluation thì model nào cho kết quả tốt nhất thì chơi, nhưng còn thực tế sử dụng phải tinh giảm đi rất nhiều. Nên cái đoạn “Computation complexity không chỉ đơn thuần là một khái niệm về hiệu quả về thời gian hay không gian của một algorithm, mà nó gắn liền với khái niệm về độ phức tạp về information, mà qua đó sẽ chi phối quyết định của một người modeler (statisticians) cho dù anh ta khách quan hay chủ quan hay không” là hơi bị chuẩn.

]]> By: Kiều Phương http://www.procul.org/blog/2008/12/12/l%e1%ba%a1i-machine-learning-va-statistics/comment-page-1/#comment-181302 Kiều Phương Fri, 26 Dec 2008 04:42:37 +0000 http://www.procul.org/blog/?p=908#comment-181302 Chúc Blog KHMT giáng sinh vui vẻ, hy vọng có nhiều bài viết hay hơn nữa (về KHMT thôi nhé ^^ chính chị chính em mệt lắm) hi, hôm nay là boxing day, ko biết blogger có quà gì không >:) Chúc Blog KHMT giáng sinh vui vẻ, hy vọng có nhiều bài viết hay hơn nữa (về KHMT thôi nhé ^^ chính chị chính em mệt lắm)
hi, hôm nay là boxing day, ko biết blogger có quà gì không >:)

]]> By: Nguyen Xuan Long http://www.procul.org/blog/2008/12/12/l%e1%ba%a1i-machine-learning-va-statistics/comment-page-1/#comment-181150 Nguyen Xuan Long Wed, 17 Dec 2008 04:15:34 +0000 http://www.procul.org/blog/?p=908#comment-181150 Hi ba'c Hu+ng, thich the^'. Have fun in SG! Hi ba’c Hu+ng, thich the^’. Have fun in SG!

]]> By: Ngô Quang Hưng http://www.procul.org/blog/2008/12/12/l%e1%ba%a1i-machine-learning-va-statistics/comment-page-1/#comment-181131 Ngô Quang Hưng Sat, 13 Dec 2008 08:18:35 +0000 http://www.procul.org/blog/?p=908#comment-181131 Cảm ơn bác Long, Bài của Breiman rất thú vị. Tôi đang ở SG và có Internet ba chớp ba nháng, sẽ bình luận sau khi về Mỹ. BTW, chúc bác có nhiều job offers. Cảm ơn bác Long,

Bài của Breiman rất thú vị. Tôi đang ở SG và có Internet ba chớp ba nháng, sẽ bình luận sau khi về Mỹ. BTW, chúc bác có nhiều job offers.

]]>