Bí quyết và mẹo chơi tài xỉu bịp hot nhất tại Reviewsgamebai.com
Trong các bài viết trước về tương quan (Correlation), hồi quy tuyến tính (Simple linear regression) đơn biến, huannghe.edu.vn và các bạn đã tìm hiểu về khái niệm, đặc điểm, cách phân biệt, cũng như cách triển khai các công thức của từng phương pháp trong việc đánh giá mối liên hệ giữa 2 biến phụ thuộc, biến độc lập. Chúng tôi cũng đã trình bày sơ lược về mô hình hồi quy tuyến tính đa biến (Multi linear regression), phương pháp đánh giá mối liên hệ giữa biến mục tiêu Y với nhiều biến đầu vào X. Ở bài viết lần này chúng ta sẽ đi vào ví dụ cụ thể, ứng dụng của mô hình hồi quy tuyến tính trong kinh doanh và bán lẻ.
Đang xem: Phương trình hồi quy tuyến tính
Đang xem: Phương trình hồi quy tuyến tính
Trong bối cảnh thay đổi liên tục, đặc biệt trong ngành bán lẻ, dữ liệu cần thu thập hàng ngày và phân tích là rất nhiều, do đó các kỹ thuật phân tích, khai phá dữ liệu được yêu cầu phải ngày càng tinh vi, có thể áp dụng linh hoạt, nhiều ưu điểm hơn. Đối với Regression cũng vậy, khi dữ liệu được cập nhật, đổi mới, các chuyên gia, những nhà nghiên cứu trong lĩnh vực khoa học dữ liệu sẽ quan tâm hay áp dụng nhiều các mô hình hồi quy chuyên sâu hơn, phù hợp hơn, thích ứng tốt với các thuộc tính, vấn đề mới của bộ dữ liệu. Điều này khiến cho phương pháp hồi quy tuyến tính – Linear regression không còn phổ biến, bị đánh giá là không còn thích hợp để áp dụng. Tuy nhiên, Linear regression vẫn là kiến thức nền tảng quan trọng nhất trong lĩnh vực thống kê và vẫn là công cụ phân tích đóng vai trò cốt lõi trong lĩnh vực kinh tế. Phương pháp hồi quy tuyến tính có ưu điểm đơn giản, dễ giải thích, thực hiện, diễn giải bằng đồ thị dựa vào phương trình hồi quy lập được, trực quan, rõ ràng, không cần phải nắm quá nhiều kiến thức nền tảng khác trong lĩnh vực khoa học dữ liệu để tiếp thu và triển khai. Bên cạnh đó Linear regression là công cụ đầu tiên, sơ khai, cơ bản nhất trong các công cụ phân tích được dùng để nghiên cứu nhanh chóng mối liên hệ giữa các yếu tố, đối tượng từ khoa học đến xã hội, mọi khía cạnh của đời sống và đưa ra những dự báo trong tương lai.
Đối với những ai đang tiếp cận Data science, hoặc Data mining, hay Data analytics chưa quen với các phương pháp xử lý dữ liệu thông thường, thì hồi quy tuyến tính có thể giúp hình thành những tư duy, am hiểu về dữ liệu, giúp nắm được bản chất của chính các công việc liên quan đến dữ liệu dễ dàng hơn, một phần giảm bớt các suy nghĩ nặng nề, chán nản khi khối lượng kiến thức phải tiếp thu là quá nhiều. Đặc biệt trong kinh tế, các nhà kinh doanh, thậm chí những nhân viên bán hàng, nhân viên marketing có thể sử dụng hồi quy tuyến tính để tự mình tìm ra câu trả lời cho các vấn đề, câu hỏi gặp phải hàng ngày dựa trên dữ liệu có sẵn. Bất kể phần mềm phân tích dữ liệu, trực quan dữ liệu, khai phá dữ liệu từ Excel, Minitab, SPSS, Rapid Miner, SAS,… cho đến ngôn ngữ lập trình xử lý dữ liệu như R, Python,… đều có tích hợp mô hình hồi quy tuyến tính cho phép chúng ta thực hiện và triển khai trên dữ liệu của mình.
Mặc dù thế giới đang thay đổi một cách chóng mặt, mọi hiện tượng, sự vật đều chuyển động không ngừng và luôn bị các yếu tố xung quanh tác động, dữ liệu vì thế phải cập nhật liên tục thì kết quả phân tích hồi quy tuyến tính không thể tuyệt đối tin tưởng và áp dụng vào thực tế, phải sử dụng thêm các phương pháp khác để đánh giá độ chính xác trong việc dự báo. Tuy nhiên không phải vì khuyết điểm rất lớn là không thể phản ánh đúng nhất các hiện tượng trong thực tế mà chúng ta bỏ qua hồi quy tuyến tính. Đây vẫn là phương pháp được khoa học công nhận, được tin tưởng, và luôn là kiến thức không thể thiếu ở những bộ môn về xử lý thông tin, dữ liệu tại hầu hết tất cả các trường đại học. Như theo tập đoàn công nghệ hàng đầu thế giới IBM “ Linear regression – A proven way to scientifically and reliably predict the future”. Cũng theo SAS, công ty hàng đầu khác về các phần mềm phân tích dữ liệu, Linear regression là phương pháp quan trọng nhất trong thống kê, giúp chúng ta tìm ra những thông tin có giá trị từ bộ dữ liệu lớn, về mối quan hệ giữa các đối tượng trong bộ dữ liệu và là công cụ không thể thiếu trong Predictive analytics – phân tích dự báo.
Dựa trên những lập luận trên, chúng ta có thể khẳng định hồi quy tuyến tính vẫn là công cụ hữu hiệu trong lĩnh vực kinh tế nói chung, và bán lẻ nói riêng trong việc tìm hiểu mối quan hệ giữa các yêu tố nghiên cứu quan trọng như giá cả, doanh thu, chiến dịch marketing, chiến lược bán hàng,…và đưa ra các dự báo, giải pháp hợp lý. Tuy nhiên chúng ta cũng cần quan tâm nhiều hơn về các cách thức đánh giá độ hiệu quả của mô hình hồi quy đảm bảo tính tối ưu.
Nói một chút về lĩnh vực bán lẻ, thì ngày nay bán lẻ cùng với thương mại điện tử là 2 ngành kinh tế được coi là phát triển mạnh nhất trong thời gian vừa qua, nhờ vào sự phát triển của công nghệ. Đối với các công ty trong ngành này, minh chứng là các tập đoàn lớn như Amazon, Walmart đã từ lâu coi dữ liệu là tài sản, là nguồn sống của mình, phải tận dụng và khai thác triệt để mục đích: thấu hiểu khách hàng thông qua hành vi, cách thức giao dịch, đưa ra các sản phẩm dịch vụ cá nhân hóa nhắm chính xác đối tượng khách hàng, xây dựng hệ thống giá linh hoạt, tối ưu hoạt động logistics,…
Trở lại với hồi quy tuyến tính, thì trong bài viết trước, chúng ta đã làm quen với các công thức, các bước cần thực hiện khi triển khai Multi linear regression – hồi quy tuyến tính đa biến. Thông thường trong thực tế khi chúng ta muốn đưa ra dự báo về một đối tượng nghiên cứu, chúng ta phải xem xét đến rất nhiều yếu tố khác tác động lên nó cùng lúc không chỉ là một, vì thế hồi quy tuyến tính đa biến được ứng dụng nhiều hơn. Ở bài viết này chúng tôi sẽ chỉ tập trung vào ví dụ sử dụng multi linear regression trong bán lẻ, còn về simple linear regression – hồi quy đơn biến, chúng tôi đã trình bày đầy đủ ở những bài viết trước, các bạn có thể tham khảo thông qua link dưới đây:
Tổng quan về Regression (phân tích hồi quy)
Correlation (tương quan) & Simple linear regression (hồi quy tuyến tính đơn giản)
Phương pháp kiểm định trong tương quan và hồi quy tuyến tính đơn biến
Dự báo trong Simple linear regression và sơ lược về Multi linear regression (chèn link vô sau)
Ứng dụng của hồi quy tuyến tính trong ngành bán lẻ hay kinh doanh là rất nhiều tùy vào từng trường hợp khác nhau, những mục tiêu nghiên cứu khác nhau của các nhà phân tích, các thuộc tính dữ liệu khác nhau, tuy nhiên tổng quan thông thường có các ứng dụng chủ yếu:
Khai phá thông tin hữu ích, giá trị của các đối tượng nghiên cứu (ví dụ tìm hiểu sự liên hệ giữa chiến dịch marketing và doanh số)Đưa ra dự báo trong tương lai (ví dụ dự báo doanh thu của một cửa hàng tại khu vực bất kỳ dựa trên các yếu tố tác động đã được tìm thấy)Tối ưu quá trình vận hành, hoạt động (ví dụ dựa trên kết quả dự báo doanh số, lập ra các kế hoạch triển khai hàng tồn kho, kế hoạch logistics)Hỗ trợ ra quyết định, chiến lược (ví dụ dựa trên mối quan hệ giữa chiến dịch marketing và doanh số để đánh giá hiệu quả chiến lược tiếp thị hiện tại, và cần làm gì để thay đổi)
Trước khi đi vào ví dụ cụ thể, chúng ta cùng review lại những kiến thức, công thức cần nắm trong hồi quy tuyến tính đa biến.
Hồi quy tuyến tính đa biến là phương pháp nghiên cứu mối quan hệ giữa biến mục tiêu (biến phụ thuộc) với nhiều hơn 2 biến độc lập (biến đầu vào).
Mô hình tổng quan với Y là biến phụ thuộc và những biến độc lập X1, X2, X3,…,Xp.
Giống như mô hình tổng quan của hồi quy tuyến tính đơn giản, β0 là giá trị ước lượng của Y khi các giá trị của các biến X đều bằng 0. Các hệ số hồi quy chưa biết từ β1… βp giờ đây sẽ được gọi là hệ số hồi quy riêng thể hiện mức độ thay đổi của giá trị trung bình Y khi biến X1…Xp thay đổi 1 đơn vị mà các biến còn lại không thay đổi. Tức là βp thể hiện mối liên hệ của riêng biến Xp đến giá trị trung bình của y. ε là sai số có phân phối chuẩn, trung bình bằng 0, là phần giá trị thể hiện các yếu tố mà mô hình không nghiên cứu đến.
Bên trên cũng chính là phương trình tổng quan hồi quy tuyến tính đa biến. Trong thực tế các hệ số hồi quy trong tổng thể không để tìm ra chính xác nên chúng ta chỉ có thể ước lượng bằng các hệ số b0, b1,..bp tính được từ dữ liệu mẫu. Phương trình hồi quy đa biến được dùng cho ước lượng, dự báo giá trị y
Y^ là các giá trị dự báo của biến mục tiêu, b0,…bp là các giá trị ước lượng của các hệ số β0,…,βp. Mặc dù cùng sử dụng phương pháp bình phương bé nhất (Least square method) nhưng điểm khác biệt giữa hồi quy tuyến tính đơn giản và hồi quy đa biến đó chính là quá trình tính toán. Với bộ dữ liệu mẫu nhỏ và chỉ có 2 biến, thì hồi quy tuyến tính đơn giản quá trình tính toán nhanh, có thể thực hiện bằng Excel lập bảng và sử dụng hàm để tính nếu số quan sát không quá lớn. Tuy nhiên với hồi quy đa biến công việc tính toán phức tạp hơn rất nhiều vì có rất nhiều biến, chưa kể tính tới số lượng quan sát trong tập dữ liệu.
Mô hình hồi quy đơn biến và đa biến đều dựa trên phương pháp bình phương bé nhất để hình thành phương trình và chỉ khác biệt về thời gian, chi phí tính toán, một bên 2 biến đơn giản hơn, một bên nhiều biến phức tạp hơn. Do áp dụng phương pháp bình phương bé nhất cùng với công thức ma trận đại số (Matrix Algebra) và không có các công thức toán nào khác có thể giúp mình tự tính toán (tính tay) đối với những dữ liệu đó nên thông thường khi tiến hành lập phương trình cho mô hình hồi quy đa biến chúng ta sẽ sử dụng các công cụ, phần mềm để phân tích và dựa vào kết quả để diễn giải mô hình. Đây là phần quan trọng nhất, nếu không hiểu các hệ số hồi quy diễn tả cái gì chúng ta sẽ khó đánh giá độ hiệu quả mô hình và đưa ra dự báo
Các công thức quan trọng bên cạnh việc diễn giải phương trình hồi quy đa biến
Các bạn có thể xem lại bài viết theo link dưới đây để hiểu hơn về ý nghĩa của từng công thức.
Dự báo trong Simple linear regression và sơ lược về Multi linear regression (chèn link vô sau)
Correlation matrix để tìm hiểu mối quan hệ giữa tất cả các biến một cách tổng quan xem trước biến nào có thể sẽ có ích cho mô hình và ngược lại, dựa trên hệ số tương quan Pearson của từng cặp biến và ngăn chặn vấn đề đa cộng tuyến (Multicolinearity, các biến độc lập có tương quan với nhau ảnh hưởng đến kết quả dự báo Y không chính xác). Multicolinearity sẽ được chúng tôi trình bày rõ hơn ở bài viết tới.Hệ số xác định r2
Hệ số xác định R2 đã được hiệu chỉnh hay còn gọi là (Adjusted Coefficient of Determination)
Công thức ước lượng hệ số hồi quy
t tra bảng với bậc tự do là n-p-1, n là tổng số quan sát, p là số biến trong phương trình
Công thức kiểm định F (kiểm định có hay không mối liên hệ giữa Y và một trong các biến X
Nguyên tắc bác bỏ:
p – value nhỏ hơn mức ý nghĩa α (có thể sử dụng bảng tra hay Excel để tìm ra dựa trên bậc tự do của F như dưới đây)Giá trị F tính được phải lớn hơn giá trị F tra bảng phân phối F (với bậc tự do thứ nhất là p ở hàng trên cùng, và bậc tự do thứ hai là n – p – 1 ở cột ngoài cùng, α ở cột thứ 2 tính từ cột ngoài cùng)Công thức kiểm định t (kiểm định mối quan hệ theo từng cặp biến X và Y)
Chúng ta có thể đặt các giả thuyết như sau, tùy theo mục đích kiểm định:
H0: βp = 0 H0: βp ≤ 0 H0: βp ≥ 0
H1: βp ≠ 0 H1: βp > 0 H1: βp Với kiểm định 2 phía: H0: βp = 0 được bác bỏ khi trị tuyệt đối của t lớn hơn t tra bảng (tα/2, n-p-1)Với kiểm định bên phải: H0: βp ≤ 0 được bác bỏ khi giá trị t dương lớn hơn giá trị dương của t tra bảng (tα, n-p-1)Với kiểm định bên trái: H0: βp ≥ 0 được bác bỏ khi giá trị t Nếu xét trên giá trị p-value, bác bỏ H0 khi p-value
Kiểm định t sẽ được dùng để xác định biến X có ý nghĩa trong việc giải thích sự thay đổi của biến Y hay không, (chứ không nên kết luận theo kiểu có hay không có mối quan hệ giữa biến phụ thuộc Y với biến X như trong simple linear regression)
Công thức ước lượng, dự báo
Phương pháp ước lượng và dự báo trong hồi quy đa biến thì tương tự trong hồi quy đơn biến. Thứ nhất có thể thay giá trị của các biến độc lập X vào phương trình hồi quy đa biến ước lượng kiếm được (sau khi đã tìm được các giá trị ước lượng b0, b1,… để dự báo giá trị của Y. Đây là dạng ước lượng điểm, giá trị Y được dự báo hay ước lượng sẽ là trung bình của các giá trị Y với giá trị X cho trước.
Thứ 2, ước lượng giá trị Y theo khoảng tin cậy thì có 2 dạng:
Confident interval: áp dụng cho ước lượng giá trị trung bình của Y khi có các giá trị X cho trước. Công thức tổng quát:
Prediction interval: áp dụng cho dự báo một giá trị riêng của Y khi có các giá trị X cho trước. Công thức tổng quát:
Tương tự như khi lập phương trình hồi quy đa biến, chúng ta phải sử dụng phần mềm phân tích dữ liệu để ước lượng giá trị y trong hồi quy đa biến do khối lượng dữ liệu nhiều, các công thức ma trận cần được áp dụng, nên việc tính tay là rất cồng kềnh và phức tạp, hiện nay mọi phần mềm phân tích dữ liệu đều tính giùm chúng ta các khoảng ước lượng của giá trị dự báo y y ở cả 2 loại, Confident và Prediction.
Lưu ý quan trọng:
Ngoài ra bên cạnh các công thức trên, thì trong hồi quy tuyến tính đa biến chúng ta còn có thêm các phương pháp quan trọng khác như phân tích sai số giữa giá trị thực tế và giá trị dự báo dựa theo phương trình hồi quy tìm được – Residual analysis (áp dụng cho mọi loại phân tích hồi quy), ngoài ra phương pháp này còn được dùng để kiểm tra những giả định về sai số ε; phương pháp Stepwise để đánh giá xem biến độc lập X nào nên giữ lại trong mô hình, và ma trận hệ số tương quan. Những phương pháp kể trên chúng tôi sẽ trình bày ở các bài viết sắp tới, đồng thời bàn luận sâu hơn về Multicolinearity – đa cộng tuyến.
Tiếp theo phần quan trọng nhất của bài viết đó là ứng dụng của hồi quy tuyến tính trong bán lẻ, cụ thể là ứng dụng mô hình Multi linear regression để tìm ra các thông tin hữu ích và có giá trị về mối quan hệ giữa các đối tượng nghiên cứu, mục đích đưa ra các dự báo và những chiến lược từ bán hàng, tiếp thị, vận hành, chuỗi cung ứng hiệu quả nhất.
Dự báo doanh thu dựa trên các yếu tố tác động là ứng dụng quan trọng nhất của hồi quy tuyến tính đa biến vì mục tiêu cốt lõi sau cùng của bất kỳ công ty bán lẻ nào cũng là doanh thu. Các yếu tố nào (các biến X) làm tăng giảm doanh thu (Y) trong tương lai? Tại sao? Cần làm gì để cải thiện hay hạn chế các yếu tố này.
Chủ đề về ứng dụng linear regression trong bán lẻ chúng tôi sẽ chia là 3 phần: phần thứ nhất thông qua một ví dụ đơn giản để hiểu những công thức liên quan, diễn giải ý nghĩa của kết quả phương trình hồi quy để nêu bật lợi ích của linear regression; phần thứ 2 sẽ trình bày về về các phương pháp chọn biến điển hình là Stepwise, phần thứ 3 sử dụng ví dụ khác để tổng hợp lại kiến thức và phương pháp đánh giá các giả định tham số ε thông qua Residual analysis như đã nói ở trên và bàn về các vấn đề có trong hồi quy đa biến ví dụ như Multicolinearity – đa cộng tuyến.
Phần 1 bài viết hôm nay ứng dụng linear regression trong bán lẻ, chúng ta sẽ bàn về ví dụ dự báo số tiền mà một khách hàng có thể bỏ ra ở lần mua hàng sắp tới. Số liệu và ví dụ lấy từ tài liệu quốc tế về thống kê và ứng dụng “The Basic Practice of Statistics” của David S.Moore.
Một quản lý tại một cửa hàng bán lẻ thời trang thu thập ngẫu nhiên dữ liệu lịch sử giao dịch của 60 khách hàng thân thiết, người quản lý này muốn dự báo ở lần mua hàng tiếp theo thì trung bình 1 khách hàng có thể sẽ bỏ ra bao nhiêu tiền để mua sản phẩm của cửa hàng. Nhiệm vụ của chúng ta là sẽ tìm ra mô hình hồi quy đa biến với các biến độc lập khác nhau để dự báo giá trị của biến mục tiêu là khoản tiền khách hàng bỏ ra. Các biến dữ liệu bao gồm: