🌍 DEV 사용자는 어디에서 오는가?

이미 알고 계시겠지만 dev.to에는 기사와 사용자를 가져오는 API가 있습니다.

내가 가장 좋아하는 HTTP 클라이언트httpie로 시도해 보겠습니다.

http https://dev.to/api/users/1

{
    "github_username": "benhalpern",
    "id": 1,
    "joined_at": "Dec 27, 2015",
    "location": "Brooklyn, NY",
    "name": "Ben Halpern",
    "profile_image": "https://res.cloudinary.com/practicaldev/image/fetch/s--DOU9qJSH--/c_fill,f_auto,fl_progressive,h_320,q_auto,w_320/https://thepracticaldev.s3.amazonaws.com/uploads/user/profile_image/1/f451a206-11c8-4e3d-8936-143d0a7e65bb.png",
    "summary": "A Canadian software developer who thinks he’s funny.",
    "twitter_username": "bendhalpern",
    "type_of": "user",
    "username": "ben",
    "website_url": "http://benhalpern.com"
}

내가 처음 알아차린 것은 id가 자동 증가되는 것 같습니다.
몇 번의 시도 끝에 dev.to: around 119000 의 총 사용자 수를 빠르게 알아냈습니다.
모든 사용자의 공개 데이터를 긁어모아 가지고 놀아보자는 생각이 들었습니다.

이 명령으로 시도해 봅시다:

for i in {1..119000}; do http https://dev.to/api/users/$i >> users.dev.to.json && echo "," >> users.dev.to.json && echo "https://dev.to/api/users/$i"; done

백그라운드에서 몇 시간 동안 실행한 후 마침내 JSON 파일에 모든 사용자를 얻었습니다.

나는 NoSQLBooster을 사용하여 mongodb 컬렉션에서 JSON 파일을 가져옴으로써 끝났습니다.

사용자 프로필에는 정보가 많지 않지만 그 중 joined_at 및 location 두 가지를 살펴볼 가치가 있습니다. 시간이 지남에 따라 등록 진행 상황을 보여주는 다이어그램이 있으면 매우 흥미로울 수 있습니다. 언젠가는 하겠지만 지금은 사용자 위치에 대한 통계를 계산해 보겠습니다.

두 개의 쿼리를 사용하여 통계를 계산했습니다. 이것은 사람들의 위치에 대한 큰 추세를 파악하는 데 도움이 되었습니다.

db.getCollection("users.dev.to").aggregate(
    {"$group": {_id: "$location", count:{$sum:1}}}
).sort("-count")

그런 다음 다른 쿼리를 사용하여 위치별 사람 수를 가져옵니다.

db.getCollection("users.dev.to").find({"location": /\bdublin\b/i})

결론은 다음과 같습니다.

대부분의 사용자(90%)는 자신의 위치를 ​​채우지 않습니다.
자신의 위치를 ​​채운 사용자의 16.3%는 USA에서 왔습니다.
5.8%는 India에서 왔습니다.
4.9%는 UK에서 왔습니다.
4%는 Japan에서 왔습니다.
3.8%는 Germany에서 입니다.

아래에서 전체 통계를 살펴보겠습니다.


#
국가
지역 또는 도시
#지역 또는 도시
#국가
%


1
미국

1850년
16.32%


뉴욕 포함
205



CA 포함
194



뉴욕 포함
147



샌프란시스코 포함
137



텍사스 포함
119



시애틀 포함
117



로스앤젤레스 포함
107



시카고 포함
101



워싱턴 포함
81



FL 포함
78



PA 포함
68



석사 포함
67



AZ 포함
38



MI 포함
34



OH 포함
30


2
인도

660
5.82%


방갈로르 포함
107



델리 포함
103


삼
영국

551
4.86%


런던 포함
258



잉글랜드 포함
35



스코틀랜드 포함
33



웨일스 포함
7


4
일본

451
3.98%


도쿄 포함
242


5
독일

428
3.77%


베를린 포함
128


6
브라질

301
2.65%

7
프랑스

294
2.59%


파리 포함
98


8
캐나다

257
2.27%


토론토 포함
107


9
나이지리아

187
1.65%


라고스 포함
97


10
네덜란드

154
1.36%


암스테르담 포함
62


11
스페인

110
0.97%

12
아르헨티나

109
0.96%

13
이탈리아

102
0.90%

14
인도네시아

92
0.81%

15
러시아

89
0.78%

16
멕시코

86
0.76%

17
필리핀 제도

85
0.75%

18
폴란드

81
0.71%

19
우크라이나

75
0.66%

20
포르투갈

63
0.56%

21
남아프리카

57
0.50%

22
파키스탄

56
0.49%

23
칠면조

55
0.49%

24
벨기에

53
0.47%

25
이집트

52
0.46%

26
방글라데시

50
0.44%

27
콜롬비아

46
0.41%

28
루마니아

45
0.40%

29
케냐

45
0.40%

30
스위스

45
0.40%

31
오스트리아

43
0.38%

32
중국

40
0.35%

33
노르웨이

38
0.34%

34
아일랜드

33
0.29%


총 주요 위치(위에 나열됨)

6683
58.94%


기타 위치(미등록)

4656
41.06%

총 위치

11339
100.00%
<null>
90260
80.80%
<empty>
10108
9.05%

총

111707
100%

Note: these numbers are one month old, but they give a good overview of the trends.

읽어 주셔서 감사합니다!