...

пятница, 5 сентября 2014 г.

Статистика Github



О публикации кода на Github или другом открытом хостинге часто говорят, как о такой живительной эвтаназии, после которой патчи, фиксы, сообщения о проблемах и прочие коммиты от сторонних разработчиков польются рекой. У меня пока противоположный опыт. В парочку моих относительно заметных проектов вообще никто и ничего реально не привнес, не говоря уж об остальных проектах. Более того, я несколько раз делал очень серьезные изменения/улучшения в чужие проекты, но их авторы морозились и не приняли изменения. Исходя из этого я развил теорию: мол, вся эта открытость и коллаборация — это красивые слова, реально все пилят что-то свое и зарабатывать деньги или пиар кому-то другому совершенно не горят желанием. Чтобы проверить теорию, я посчитал кое-какую статистику по всем репозиториям на Github, у которых больше 700 звездочек, таких чуть больше 4 тысяч.

Легенда




Язык — основной язык проекта, None означает, что проект состоит только из текстовых (.txt, .md, без расширения) или бинарных файлов.

Коммиты — общее количество коммитов, сделанных сотней самых активных авторизованных людей.

Добавления — общая разница добавленных и удаленных строчек по всем коммитам, сделанным сотней самых активных авторизованных людей.

Изменения — общая сумма добавленных и удаленных строчек по всем коммитам, сделанным сотней самых активных авторизованных людей.

Авторы — количество человек, которые в сумме сделали больше 90% коммитов, и/или добавили больше 90% строк, и/или сделали больше 90% изменений. Должно выполняться как минимум два условия из трех.

Самый главный недостаток исследования — т. н. неавторизованные коммиты вообще никак не учитываются. А их довольно много, во многих проектах почти все коммиты — неавторизованные. Экстремальный случай — в проекте WebKit/webkit больше 150 тысяч коммитов, но нет ни одного авторизованного :( Так что многие результаты ниже очень неточные/неполные.


Ниже вы увидите множество проектов с отрицательным кол-вом добавлений. Это означает, что основная разработка идет неавторизованными коммитами, а авторизованные пользователи только удаляют код :)


Второй недостаток — не учитываются коммиты от авторизованных людей, которые не в ходят в первую сотню по количеству коммитов. Впрочем, это влияет на единицы проектов, и то не сильно, потому что в «хвосте» как правило люди, сделавшие один однострочный коммит. Вероятно, рекордсмен по количеству авторизованных контрибьюторов — проект torvalds/linux, 4105 человек.


А теперь куча таблиц:



























































































































































































































































АвторыКол-во проектов
010 — проекты без авторизованных коммитов, напр. nginx/nginx, v8/v8, или слишком новые, напр. ericjohnson/canabalt-ios
11534 — 36,7%
2766 — 18,3%
3449 — 10,7%
4264 — 6,3%
5181 — 4,3%
6151 — 3,6%
7105 — 2,5%
883 — 2,0%
963 — 1,5%
1075 — 1,8%
1154 — 1,3%
1242 — 1,0%
1350 — 1,2%
1444 — 1,1%
1524 — 0,6%
1631 — 0,7%
1721 — 0,5%
1822 — 0,5%
1916 — 0,4%
2014 — 0,3%
2110 — 0,2%
2219 — 0,5%
2317 — 0,4%
249 — 0,2%
2512 — 0,3%
268 — 0,2%
2711 — 0,3%
288 — 0,2%
293 — 0,1%
308 — 0,2%
316 — 0,1%
324 — 0,1%
337 — 0,2%
344 — 0,1%
357 — 0,2%
366 — 0,1%
372 — 0,0%
383 — 0,1%
391 — 0,0%
402 — 0,0%
412 — 0,0%
422 — 0,0%
444 — 0,1%
451 — 0,0%
461 — 0,0%
484 — 0,1%
502 — 0,0%
512 — 0,0%
523 — 0,1%
551 — 0,0%
571 — 0,0%
582 — 0,0%
591 — 0,0%
621 — 0,0%
632 — 0,0%
641 — 0,0%
651 — 0,0%
661 — 0,0%
681 — 0,0%
Всего4179

В целом, мой тезис скорее не оправдывается, только 36% популярных проектов разрабатываются в одиночку. Хотя тут как посмотреть, ведь это только проекты от 700 звездочек!

Топ 20 проектов по количеству авторов


Топ 20 проектов по количеству коммитов


Эта и две следующие таблицы очень сильно пострадали из-за неавторизованных коммитов. У torvalds/linux от 470 тысяч коммитов осталось только 43 тысячи авторизованных от авторов из первой сотни, а уже упомянутый WebKit/webkit со своими 150 тысячами коммитов вообще сюда не попал.

Топ 20 проектов по количеству добавлений


Первый честный проект тут это ariya/phantomjs.

Топ 20 проектов по количеству изменений


Топ 7 проектов по количеству звездочек с одним автором


Топ 7 проектов по количеству коммитов с одним автором


Итак, главным маньяком объявляется joeyh, который сделал как минимум 10 тысяч коммитов (судя по репозиторию, скорее 20, половина неавторизованных), но так и не дождался нормальной поддержки от сообщества. Символично, что проект на Хаскеле.

Дальше — статистика отдельно по языкам.


JavaScript
1334 проекта — 31,9%

Среднее количество авторов: 3,6.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
npm/npm JavaScript484747311554947857181
Jermolene/TiddlyWiki5 JavaScript800411223528922010031
tinymce/tinymce JavaScript20873742980218665671





Ruby
495 проектов — 11,8%

Среднее количество авторов: 8,5.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
rails/rails Ruby2310430372172648352980848
rails/docrails Ruby94830360172063352910948
ruby/ruby Ruby590427415906097370348111
Homebrew/homebrew Ruby19145251794467338896125
jruby/jruby Ruby18522000976707790549816

Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
churchio/onebody Ruby102536854886420642501
typus/typus Ruby9493510137656934971
nanoc/nanoc Ruby9783257302632378011





Objective-C
409 проектов — 9,8%

Среднее количество авторов: 2,4.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
johnezang/JSONKit Objective-C437162401582211
Inferis/ViewDeck Objective-C408144221911362171
facebook/Shimmer Objective-C370624201022101

Топ 3 проекта по количеству коммитов с одним автором






Python
348 проектов — 8,3%

Среднее количество авторов: 5,9.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
odoo/odoo Python111331110-1274226724412230
saltstack/salt Python396522543422978181554627
django/django Python1106616569656253407499119
edx/edx-platform Python14001612032119521211064621
sympy/sympy Python158215001353140265653648

Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором






Java
240 проектов — 5,7%

Среднее количество авторов: 4,7.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором






CSS
231 проект — 5,5%

Среднее количество авторов: 3,0.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором






PHP
199 проектов — 4,8%

Среднее количество авторов: 6,9.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
jrburke/requirejs PHP62181058374093081091
zurb/ink PHP3935134148292915991
sahat/satellizer PHP3199752128331943371

Топ 3 проекта по количеству коммитов с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
squizlabs/PHP_CodeSniffer PHP8581994874801711821
Behat/Behat PHP11481872440953346711
nrk/predis PHP14811519549003457601





C
155 проектов — 3,7%

Среднее количество авторов: 5,5.


Топ 5 проектов по количеству авторов

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
raspberrypi/linux C169628833324302262324465
torvalds/linux C1539443786507000435957263
git/git C662816804350407113402944
freebsd/freebsd C70157479-402391099314311135
FFmpeg/FFmpeg C125046411665608318675025

Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором






None
132 проекта — 3,2%

Среднее количество авторов: 6,6.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором






C++
106 проектов — 2,5%

Среднее количество авторов: 4,9.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
ceph/ceph C++86227577-72820303169611
mongodb/mongo C++5580222723144405939762511
rethinkdb/rethinkdb C++70401843422287618017711
cocos2d/cocos2d-x C++4204137058754881913808628
xbmc/xbmc C++332911700-1718067743480930

Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
cloudera/Impala C++105219316994463618628233
sass/libsass C++18051217-10007815506223239
facebook/hhvm C++9676949116020751942985124
cocos2d/cocos2d-x C++4204137058754881913808628
Itseez/opencv C++32771086314356711696566716

Топ 3 проекта по количеству звездочек с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
coolwanglu/pdf2htmlEX C++32871454255251558391
atom/atom-shell C++30082023429052135311
google/lmctfy C++2490553669783985181

Топ 3 проекта по количеству коммитов с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
tekezo/Karabiner C++750802131262011515421
alexrj/Slic3r C++76528163699735286951
jlnr/gosu C++712238011763821065521





Go
91 проект — 2,2%

Среднее количество авторов: 3,4.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
andlabs/ui Go15141790137582026021
DisposaBoy/GoSublime Go13131545334492117611
gopherjs/gopherjs Go7101068106841304981





Shell
82 проекта — 2,0%

Среднее количество авторов: 6,6.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
xdissent/ievms Shell747881257847581
rupa/z Shell297214355729411
holman/dotfiles Shell24873751746294781

Топ 3 проекта по количеству коммитов с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
babun/babun Shell12426642164442681
yyuu/pyenv Shell165741364621865371
ndbroadbent/scm_breeze Shell976384415790331





CoffeeScript
70 проектов — 1,7%

Среднее количество авторов: 4,9.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
codecombat/codecombat CoffeeScript348432031769769643787
e14n/pump.io CoffeeScript103134381252034420791
assaf/zombie CoffeeScript24341099732933849173
jashkenas/coffeescript CoffeeScript98283143533705515409
atom/atom CoffeeScript8245163845167650923046

Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
e14n/pump.io CoffeeScript103134381252034420791
bevry/docpad CoffeeScript2316988133601514121
jenius/roots CoffeeScript980733117481952701





VimL
50 проектов — 1,2%

Среднее количество авторов: 5,1.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором






C#
41 проект — 1,0%

Среднее количество авторов: 7,0.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
mono/mono C#2426622641322991858579727
mono/monodevelop C#112229941-254891196319738
ravendb/ravendb C#12001808326466241641682210
OpenRA/OpenRA C#13011074417535615362528
mono/MonoGame C#22504941509111167066510

Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором






Scala
39 проектов — 0,9%

Среднее количество авторов: 6,4.


Топ 5 проектов по количеству авторов

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
mesos/spark Scala14392727-139641852157630
twitter/finagle Scala2804252011697540560322
scalaz/scalaz Scala147231635805422124819
scala/scala Scala285613047666962318301017
twitter/scalding Scala16781287327369719215

Топ 5 проектов по количеству коммитов

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
scala/scala Scala285613047666962318301017
akka/akka Scala29428314287709212835313
ornicar/lila Scala7017402991076514151
apache/spark Scala13735568455862191331102
gatling/gatling Scala13904261511385803745

Топ 5 проектов по количеству добавлений

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
scala/scala Scala285613047666962318301017
apache/spark Scala13735568455862191331102
takezoe/gitbucket Scala325615383101879992571
akka/akka Scala29428314287709212835313
lift/framework Scala808221116032873066010

Топ 5 проектов по количеству изменений

























































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
apache/spark Scala13735568455862191331102
mesos/spark Scala14392727-139641852157630
scala/scala Scala285613047666962318301017
akka/akka Scala29428314287709212835313
takezoe/gitbucket Scala325615383101879992571

Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
ornicar/lila Scala7017402991076514151
takezoe/gitbucket Scala325615383101879992571
wordnik/swagger-core Scala22026931005172654491





Clojure
29 проектов — 0,7%

Среднее количество авторов: 5,6.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
LightTable/LightTable Clojure633250221517410543701
swannodette/om Clojure26245363137729111
ztellman/aleph Clojure11286054250580001

Топ 3 проекта по количеству коммитов с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
daveray/seesaw Clojure77280320462483181
ztellman/lamina Clojure72164214102741941
magomimmo/modern-cljs Clojure940616126612141791





Swift
15 проектов — 0,4%

Среднее количество авторов: 1,8.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором






Perl
14 проектов — 0,3%

Среднее количество авторов: 5,9.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
sitaramc/gitolite Perl496145116935622151
major/MySQLTuner-perl Perl166297174573211
kraih/mojo Perl13166233298623859401

Топ 3 проекта по количеству коммитов с одним автором







































ПроектЯзыкЗвездочкиКоммитыДобавленияИзмененияАвторы
kraih/mojo Perl13166233298623859401
prey/prey-bash-client Perl828869-5103861851
onyxfish/csvkit Perl93361995816611682661





Emacs Lisp
12 проектов — 0,3%

Среднее количество авторов: 6,5.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором






TeX
10 проектов — 0,2%

Среднее количество авторов: 2,4.


Топ 5 проектов по количеству авторов


Топ 5 проектов по количеству коммитов


Топ 5 проектов по количеству добавлений


Топ 5 проектов по количеству изменений


Топ 3 проекта по количеству звездочек с одним автором


Топ 3 проекта по количеству коммитов с одним автором































































































































































































































































ЯзыкКол-во проектовСреднее кол-во авторов
JavaScript1334 — 31,9%3,6
Ruby495 — 11,8%8,5
Objective-C409 — 9,8%2,4
Python348 — 8,3%5,9
Java240 — 5,7%4,7
CSS231 — 5,5%3,0
PHP199 — 4,8%6,9
C155 — 3,7%5,5
None132 — 3,2%6,6
C++106 — 2,5%4,9
Go91 — 2,2%3,4
Shell82 — 2,0%6,6
CoffeeScript70 — 1,7%4,9
VimL50 — 1,2%5,1
C#41 — 1,0%7,0
Scala39 — 0,9%6,4
Clojure29 — 0,7%5,6
Swift15 — 0,4%1,8
Perl14 — 0,3%5,9
Emacs Lisp12 — 0,3%6,5
TeX10 — 0,2%2,4
Haskell9 — 0,2%3,9
Erlang8 — 0,2%9,9
ActionScript6 — 0,1%2,2
Assembly6 — 0,1%18,8
R5 — 0,1%2,8
Lua4 — 0,1%7,5
Rust4 — 0,1%16,5
PowerShell3 — 0,1%4,7
XSLT3 — 0,1%3,7
OCaml3 — 0,1%2,7
Objective-C++3 — 0,1%2,7
Elixir3 — 0,1%6,3
Groovy2 — 0,0%3,5
Matlab2 — 0,0%2,0
TypeScript2 — 0,0%11,0
Dart2 — 0,0%8,0
LiveScript1 — 0,0%3,0
Racket1 — 0,0%7,0
Scheme1 — 0,0%2,0
Vala1 — 0,0%3,0
Common Lisp1 — 0,0%6,0
Visual Basic1 — 0,0%1,0
Objective-J1 — 0,0%10,0
Io1 — 0,0%1,0
Mirah1 — 0,0%3,0
Julia1 — 0,0%21,0
IDL1 — 0,0%2,0
Nimrod1 — 0,0%8,0

На языках Objective-C, CSS, Swift, TeX и ActionScript пишутся в основном конечные приложения, работы или сайты, а не библиотеки или фреймворки, которые больше располагают к коллаборации, потому у перечисленных языков маленькое среднее кол-во авторов на проект.

Отмечу высокий результат Ruby-проектов. Если хотите, чтобы сообщество вам помогло, пишите на Ruby.



Код парсинга, анализа и генерации этой статьи: http://ift.tt/1pPSJ4M


Таблица со всеми данными в этой статье, и по не вошедшим языкам можно отсортировать и посмотреть: http://ift.tt/1pPSJ4Q


JSON с сырыми данными (18 Мб): http://ift.tt/1rbcNKq (если эта ссылка поломается, ищите в поиске документов в ВК '700.json' или 'github')


This entry passed through the Full-Text RSS service - if this is your content and you're reading it on someone else's site, please read the FAQ at http://ift.tt/jcXqJW.


на
Ярлыки: ,

Комментариев нет:

Отправить комментарий

Подписаться на: Комментарии к сообщению (Atom)