где остальные 93 миллиона проектов github в google big query?

Гугл любит выкидывать из своих баз мусорные результаты. Делай выводы о качестве этих пропавших проектов.

Интересно, откуда взялась цифра в 93 миллиона проектов.

выводы о качестве этих пропавших проектов

Не утверждай что все они мусорные, не живыми же руками оно проверялось. И не забывай что это дэн73, он же может раскопать такого, чего мы никогда не видали.

Сто минус три будет девяносто три, видимо.

Выборку я выложил, там есть явные школьные домашки с одним коммитом.

Всего 96, как утверждается. Оценить долю частных я не могу. Кто-то через API увидел не менее 50 млн, думаю, что частных среди них нет:

https://www.quora.com/How-many-repositories-are-there-on-GitHub

https://api.github.com/repositories?since=50000000

Перечитайте пост, он поменялся.

Всего 96, как утверждается.

Кем утверждается? Пост quora, на который ты ссылаешься, не содержит цифры 96млн и неправильно оценил скорость роста уже 6 лет назад.

Могу предположить, что у 93 млн нет коммитов. Для доступа к big query нужно дать номер банковской карты?

Я ищу коммиты на русском языке.

Но зачем?

Хотя нет, были бы коммиты тех проектов, что ты указал

Я ищу коммиты на русском языке.

Хочешь вычислять их авторов и выезжать к ним на дом с бейсбольной битой?

Перечитай пост.

Может ли это быть связано с тем, что на гитхабе принципиально не работает поиск по исходникам в форках?

Если форки не равноценны проектам с нуля, то возможно там 3 миллиона начатых с нуля и 93 миллиона форков?

SO знает ответ - в выборку попадают только те репы, которые github считает «опен соурсе», а это зависит от его алгоритма, который имеет свои особенности. SBCL в них не попал, так что, в определённом смысле entefeed был прав. С другой стороны, можно сказать, что у них недостаточно умный алгоритм определения лицензий, раз так мало проектов прошли через фильтр.

Но, например, как я понял, для него bsd-3-clause - уже не open source. А эту лицензию он определяет, например,

curl -H "Accept: application/vnd.github.drax-preview+json" https://api.github.com/repos/budden/dlist | grep license -A 6

Предлагается обходной путь через архивы:

SELECT * FROM [githubarchive:day.20160701] 
WHERE repo.name = 'sbcl/sbcl' AND type='PushEvent' 

Вообще, по этому сервису у меня сложилось ощущение, что они какие-то очень хитропопые. Например, мне дали кредит 300 долларов на «пробный период». А кредит-то небось потом попросят отдать.

Да, я так понял, чтобы делать запросы в нормальном количестве, а не терабайт в месяц, нужно дать данные карточки. И потом, возможно, придётся за это платить.

Это не тот кредит, который в банке, это просто триал :)

И да, карточку придется дать. Там можно настроить алерты и жесткое отключение по достижению определенного бюджета, но они могут сработать с задержкой, поэтому бюджет надо настраивать с запасом.