]> code.communitydata.science - stats_class_2019.git/blob - problem_sets/week_01/ps1-worked_solution.Rmd
ps8
[stats_class_2019.git] / problem_sets / week_01 / ps1-worked_solution.Rmd
1 ---
2 title: 'Week 1 Problem Set: Worked solutions'
3 subtitle: "Statistics and statistical programming  \nNorthwestern University  \nMTS 525"
4 author: "Aaron Shaw"
5 date: "April 5, 2019"
6 output: html_document
7 ---
8
9 ```{r setup, include=FALSE}
10 knitr::opts_chunk$set(echo = TRUE)
11 ```
12
13 ## Programming Challenges
14
15 No worked solutions to programming challenges this week. Make sure you completed the assignment as described. Contact us if you have trouble or are uncertain.
16
17 ## Statistical Questions
18
19 All questions taken from the *OpenIntro* textbook, Chapter 1.
20
21 ### SQ1 — 1.6
22
23 (a) 129 UC Berkeley students.
24 (b) From the description in the question text and the paper it seems like there are two primary measures:
25 * Unethical behavior (candies taken): discrete continuous measure.
26 * Perceived social class (experimental treatment): categorical measure.
27 (c) Many possible answers here. A basic one turns the first sentence around: What is the difference in unethical behavior by (perceived) social class?
28
29 Note that the summary in *OpenIntro* sort of bungles/ignores the fact that the paper focuses on *perceived* social class rather than social class. That's a shame since the paper is very clear. I plan to contact the textbook authors about it if there are no corrections in the 4th edition.
30
31 ### SQ2 — 1.12
32
33 (a) The population of interest is humans. The sample is the 129 UC Berkeley undergraduates who participated in the study.
34 (b) Generalizability seems...limited in this study, although the paper describes an experiment in which *perceived* social class is manipulated and thus supports causal identification of effects of priming on unethical behavior. The study as described in the textbook does not support causal interpretations.
35
36
37 ### SQ3 — 1.52
38
39 The median here looks to be about 80, while the mean looks to be about 75. You would expect this relationship (median > mean) because of the left skew of the data.
40
41 ### SQ4 — 1.56
42
43 (a) The distribution is right skewed with potential outliers on the positive end, therefore the median and the IQR are preferable measures of center and spread.
44
45 (b) The distribution is somewhat symmetric and has few, if any, extreme observations, therefore the mean and the standard deviation are preferable measures of center and spread.
46
47 (c) The distribution would be right skewed. There would be some students who did not consume any alcohol, but this is the minimum since students cannot consume fewer than 0 drinks. There would be a few students who consume *many* more drinks than their peers, giving the distribution a long right tail. Due to the skew, the median and IQR would be preferable measures of center and spread.
48
49 (d) The distribution would be right skewed. Most employees would make something on the order of the median salary, but we would anticipate upper management makes much more. The distribution would have a long right tail, and the median and the IQR would be preferable measures of center or spread.
50
51 ### SQ5 — 1.64
52
53 (a) The distribution of percentage of population that is Hispanic is extremely right skewed with majority of counties with less than 10% Hispanic residents. However there are a few counties that have more than 90% Hispanic population. It might be preferable, in certain analyses, to use the log-transformed values since this distribution is much less skewed.
54
55 (b) The map reveals that counties with higher proportions of Hispanic residents are clustered along the Southwest border, all of New Mexico, a large swath of Southwest Texas, the bottom two-thirds of California, and in Southern Florida. In the map all counties with more than 40% of Hispanic residents are indicated by the darker shading, so it is impossible to discern the how high Hispanic percentages go. The histogram reveals that there are counties with over 90% Hispanic residents. The histogram is also useful for estimating measures of center and spread.
56
57 (c) Both visualizations are useful and a preference for one over the other most likely depends on the context in which you planned to use it.
58
59 ## Empirical Paper Questions
60
61 All questions refer to the Kramer et al. study identified on the course website.
62
63 ### EQ1
64
65 (a) The cases are 689,003 individuals included in the study. 
66
67 (b) The key variables include:
68 * Emotional exposure (whether positive or negative words were potentially reduced): dichotomous categorical.
69 * Percentage of positive/negative emotion words in posts: continuous numeric.
70
71 (c) Many possible responses, but here's one: Does emotional contagion occur via social networks online?
72
73 ### EQ2
74
75 (a) The treatment groups received a reduced portion of posts in their news feed with either positive or negative words in them. The control groups had random posts removed from their news feed.
76
77 (b) The study uses random sampling (by an internal account ID number).
78
79 (c) See part (a) of this question. The manipulation involved probabilistically reducing the proportion of news feed posts with either positive or negative language in them.
80
81 ### EQ3
82
83 (a) Humans.
84
85 (b) 689,003 English language Facebook users during a week or so in January 2012.
86
87 (c) Many possible answers. Personally, I find such generalization a bit iffy (despite the sample size) given the likely biases of the sample in comparison to the target population of the study. English language Facebook users have a number of attributes that differentiate them from even a broader English language speaking population in the U.S. and Facebook users and it's likely that some of these attributes systematically covary with the outcomes of interest in this study. Covariance (non-independence) between these factors and the outcomes of interest would render the estimated effects subject to bias.
88
89 ### EQ4
90
91 See the figure and the discussion in the paper. The four panels capture the comparisons of the treatment and control conditions by the two outcome measures. They show that the treatments had the anticipated effects with reduced positive posts reducing/increasing the proportion of positive/negative words in subsequent posts and reduced negative posts reducing/increasing the proportion of negative/positive words in subsequent posts.
92
93 ### EQ5
94
95 The study finds evidence of emotional contagion in soicial networks among English language Facebook users in 2012. The estimated effects sizes are tiny (Cohen's *d* ~ 0.02. Read more about [Cohen's *d*](https://trendingsideways.com/the-cohens-d-formula)). However, the effect is potentially still quite meaningful and substantively important because the manipulation was itself quite small in scope (the scale of the study notwithstanding). There estimates may contain unobserved biased due to the construction of the sample, but overall this is a landmark study demonstrating the existence of an infrequently observed phenomenon (emotional contagion) in a context dominated by large numbers of short computer-mediated communications.

Community Data Science Collective || Want to submit a patch?