2019.06.15 Нестандартная выборка


Очень много болтовни, про "цыфровую экономику", только уверен она не сильно будет отличаться от обычной, построенной в основном на информационной асимметрии. Обувании с разной степени наглости тех кто не "знает", теми кто знает.
 
Простой пример - с уходящими в прошлое - "доменными именами". Есть полугосударственные(сейчас уже) структуры по регистрации этих самых имен:

Или вот 

 

Тоже что то вроде "около", 

или еще - тоже около доменов крутится

Каких только высокопарных там тем нет, только конкретики нет. 

В лучшем случае можно поискать информацию по "одному" или пооблизываться на статистику (которую не проверить), хотя казалось бы какая проблема выложить одним обновляемым файлом все эти 4,5 млн доменов - в архиве жалкие несколько сотен мегабайт. Да даже если и гигабайт можно хоть торрентом, можно хоть инкрементальными обновлениями. Но... нет.

Зато в интернете полно объявлений о продаже этой же информации, которая должна быть доступна итак - например с одного из сайтов.

Рекламу делать не буду, можно найти при желании. 10 баксов не жалко, но вопрос в достоверности и оперативности. 

При том, что получение оперативной и достоверной этой самой информации по регистрации на самом деле весьма полезная штука не только в коммерческом плане (могу ошибаться - там вроде бизнес для своих типа как вокруг ОСАГИ - когда домены "резервируются" и в случае реальной покупки оформляются, если нет то так и висят), но и в общественном - сейчас на нашем поле экспериментов разворачивается очередное обострение борьбы самых разных группировок [ https://romansmirnov.org/201 ], в том числе внешних  и "регистрируемые", раскручиваемые пока еще по старинке сайты достаточно знаковы в общем потоке. 

Ладно черт с ней с политотой, но сам подход навевает на грустные мысли о том, что не смотря на красивые слова или грандиозные форумы-посиделки - общественными персональными и тем более большими данными будут торговать как и раньше [ https://romansmirnov.org/147 ] - медицинские карты сливать фарм компаниям, личную переписку продаванам, а эцп нужно лишь перцам, чтобы Вашу недвигу переоформить без хлопот )).

Чо делать? 

На самом деле не очень понятно. Потому что казенные мозги в эту тему понимают плохо, а те коммерсы, которые заходят на эту поляну они быстро по привычке выжимают максимальный профит на "цифровизации", забыв про "общественный интерес", ну и вобще про ее смысл как таковой. Даже казалось бы "наши" персонажи вроде Ашманова говорят о каких то невероятных затратах на Российский политический ютюб ( балансировка на ngnix, чутка доработанный html5 плеер и несколько тысяч долларов в месяц на трафик), про возню с открытостью данных вобще молчу... 

Как у тех кто эту открытость, после "социализма" в принципе замутил? С теми же доменами у бритишей:

фри оф чардж для мемберов https://registrars.nominet.uk/uk-namespace/registrar-agreement/list-of-members/

Вот тебе и "демократия" и "open government". 

Вобще "домены" кстати достаточно знаковая тема - анархо-либеро-кибер-капиталисты все грозятся саморегулированием, но так до сих пор не смогли договориться даже о том, чтобы этих "доменных" бюрократов сковырнуть ))) 

А еще на на святое - на "фиат" покушаются или на "электроэнергетику" со своими "грид блокчейнами" ... , бгг.

Быстро в стойло загонят как только какую то угрозу начнут представлять - хоть мягкими, хоть жесткими методами. А "цыфровая" же экономика в ее текущей реализации ничем не отличается от обычной - только все негативные "капиталистические" процессы в ней ускорятся в разы. Прогресс может быть только при изменении базовых экономических механизмов - вроде устранения той же асимметрии.

 

P.S. речь конечно не про технику или что у нас "платно", а у англичан бесплатно (хотя у них гораздо дороже если за мебершип заплатить)

Ну и это 

#!/bin/sh
mkdir /mnt/crawlerindex/2019-18
cd /mnt/crawlerindex/2019-18
wget https://commoncrawl.s3.amazonaws.com/crawl-data/CC-MAIN-2019-18/cc-index...
gzip -d cc-index.paths.gz
apt install -y parallel
cat cc-index.paths | parallel -j 32 --gnu "wget https://commoncrawl.s3.amazonaws.com/{}"

 

 

P.S. Пример интересных запросов к полной бд по доменам - выборы президента - 2024

Похожие на кандидатов

MOROZOV2024.RU Этот домен делегирован 2019-06-11
SECHIN2024.RU Этот домен делегирован 2019-05-07
PROKHOROV2024.RU Этот домен делегирован 2019-05-01
NAVALNY2024.RU Этот домен делегирован 2019-05-01
PROGRAMMA2024.RU 2019-04-29
PROGRAMA2024.RU 2019-04-29
PROGRAM2024.RU 2019-04-29
MATOVNIKOV2024.RU Этот домен делегирован 2019-04-29
BABICH2024.RU Этот домен делегирован 2019-04-26
BEGLOV2024.RU Этот домен делегирован 2019-04-24
SOBYANIN2024.RU Этот домен делегирован 2019-04-24
KIRIENKO2024.RU Этот домен делегирован 2019-04-24
MALOFEEV2024.RU Этот домен делегирован 2019-04-11
ZHIRINOVSKY2024.RU Этот домен делегирован 2019-04-06
KOZHEMYAKO2024.RU Этот домен делегирован 2019-04-06
GUDKOV2024.RU Этот домен делегирован 2019-04-05
ZINICHEV2024.RU Этот домен делегирован 2019-04-04
NABIULLINA2024.RU Этот домен делегирован 2019-03-07
PUTIN2024.RU Этот домен делегирован 2019-02-13
SHULMAN2024.RU Этот домен делегирован 2018-12-13
DYUMIN2024.RU Этот домен делегирован 2018-11-27
STAROSTIN2024.RU Этот домен делегирован 2018-10-12
DUROV2024.RU Этот домен делегирован 2018-07-17
TRAVNIKOV2024.RU Этот домен делегирован 2018-07-04
ABUGOV2024.RU Этот домен делегирован 2018-06-18
GREF2024.RU Этот домен делегирован 2018-03-16
NAGAYCEV2024.RU Этот домен делегирован 2018-02-27
PREEMNIK2024.RU Этот домен делегирован 2018-02-21
PRIEMNIK2024.RU Этот домен делегирован 2018-02-20
VOLKOV2024.RU Этот домен делегирован 2018-02-20
VETROV2024.RU Этот домен делегирован 2018-01-31
GRUDININ2024.RU Этот домен делегирован 2018-01-19
SHUVALOV2024.RU Этот домен делегирован 2018-01-09
VOLODIN2024.RU Этот домен делегирован 2017-12-22
VIBORY2024.RU 2017-12-12
KREMLIN2024.RU Этот домен делегирован 2017-12-12
ELECTION2024.RU Этот домен делегирован 2017-12-11
VIBORIPREZIDENTA2024.RU Этот домен делегирован 2017-12-09
2024PUTIN.RU Этот домен делегирован 2017-12-09
KOVALEV2024.RU Этот домен делегирован 2017-11-01
BUZOVA2024.RU Этот домен делегирован 2017-10-19
SOBCHAK2024.RU Этот домен делегирован 2017-10-10
ORESHKIN2024.RU Этот домен делегирован 2017-09-08
MIRONOV2024.RU Этот домен делегирован 2017-09-08
DUMIN2024.RU Этот домен делегирован 2017-09-08
ROGOZIN2024.RU Купить Этот домен делегирован 2015-06-03
PREZIDENT2024.RU Этот домен делегирован 2014-06-11
VARLAMOV2024.RU Этот домен делегирован 2011-10-14
MEDVEDEV2024.RU Этот домен делегирован 2011-10-13

хм.... скудная какая фантазия у политтехнологов, бгг. Впрочем большинство одним сквоттером зарегены.


Предыдущая:

госпитали, датацентры и военные базы


Следующая: