testing

Transcript

1. Churn  modeling:  Predic1ng   customer  churn  from  Salesforce   usage  data     Lakshmi  Narayan  !  Insight  Data  Science  
2. Data   Users   Month   Hits1   Hits2    .  .  .   Hits65   A   Feb  2014   1063   0      .  .  .     .  .  .     A   Mar  2014   1709   0   .  .  .     .  .  .     A   Apr  2014   1833   0   .  .  .     .  .  .     A   May  2014   1051   0   .  .  .     .  .  .     B   Sept  2014   0   1   .  .  .     .  .  .     B   Oct  2014   0   5   .  .  .     .  .  .     •  7276  users,  417  churned   Lakshmi  Narayan  !  Insight  Data  Science  
3. Data   Users   Month   Hits1   Hits2    .  .  .   Hits65   A   Feb  2014   1063   0      .  .  .     .  .  .     A   Mar  2014   1709   0   .  .  .     .  .  .     A   Apr  2014   1833   0   .  .  .     .  .  .     A   May  2014   1051   0   .  .  .     .  .  .     B   Sept  2014   0   1   .  .  .     .  .  .     B   Oct  2014   0   5   .  .  .     .  .  .     •  7276  users,  417  churned   •  65  ‘Hits’  categories   Lakshmi  Narayan  !  Insight  Data  Science  
4. Data   Users   Month   Hits1   Hits2    .  .  .   Hits65   A   Feb  2014   1063   0      .  .  .     .  .  .     A   Mar  2014   1709   0   .  .  .     .  .  .     A   Apr  2014   1833   0   .  .  .     .  .  .     A   May  2014   1051   0   .  .  .     .  .  .     B   Sept  2014   0   1   .  .  .     .  .  .     B   Oct  2014   0   5   .  .  .     .  .  .     •  7276  users,  417  churned   •  65  ‘Hits’  categories   •  January  2014  –  May  2015   Lakshmi  Narayan  !  Insight  Data  Science  
5. Modeling   Lakshmi  Narayan  !  Insight  Data  Science   •  Feature  selec1on  
6. Modeling   Lakshmi  Narayan  !  Insight  Data  Science   •  Feature  selec1on   •  Focus  on  churn  
7. Modeling   Lakshmi  Narayan  !  Insight  Data  Science   •  Feature  selec1on   •  Focus  on  churn   •  Approaches  
8. Lakshmi  Narayan  !  Insight  Data  Science   Modeling   0.00 0.01 0.02 0.00 0.25 0.50 0.75 1.00 Predicted probability Percentage churn counts 200 400 600 800 1000
9. Lakshmi  Narayan  !  Insight  Data  Science   Modeling   0.00 0.01 0.02 0.00 0.25 0.50 0.75 1.00 Predicted probability Percentage churn counts 200 400 600 800 1000 Accuracy:50%   Recall:  70%    
10. Lakshmi  Narayan  !  Insight  Data  Science   Insights   •  Feature  selec1on:  overall  and  recent  use  
11. Lakshmi  Narayan  !  Insight  Data  Science   Insights   •  Feature  selec1on:  overall  and  recent  use   •  Relevant  hits  categories    
12. Lakshmi  Narayan  !  Insight  Data  Science   Insights   •  Feature  selec1on:  overall  and  recent  use   •  Relevant  hits  categories     •  Customer  interven1on  
13. Lakshmi  Narayan     UC  Berkeley