Кабинет
Ivan Begtin

Ivan Begtin

I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and etc. CTO&Founder of Dateno https://dateno.io Telegram @ibegtin Facebook - https://facebook.com/ibegtin Email [email protected] Ads/promotion agent: @k0shk

Юзернейм
@begtin
Категория
Технологии
Страна
РоссияРоссия
Создан
, 10 лет
Подписчики9 109+2 за 6 дней
Просмотров на пост, 7 дн.727−20,5% к пред. 7 дн.
ERR7,98 %за 7 дней

Подписчики, 30 дней

10 нояб. – 16 нояб.+2 (0%)

Показать таблицей
ДатаПодписчики
10 нояб. 2026 г.9 107
11 нояб. 2026 г.9 108
12 нояб. 2026 г.9 108
13 нояб. 2026 г.9 111
14 нояб. 2026 г.9 108
16 нояб. 2026 г.9 109

Средние просмотры поста по дням

По дню публикации

Показать таблицей
ДатаПросмотров на пост
2 нояб. 2026 г.1 070
4 нояб. 2026 г.992
5 нояб. 2026 г.972
7 нояб. 2026 г.744
9 нояб. 2026 г.783
10 нояб. 2026 г.688
11 нояб. 2026 г.862
12 нояб. 2026 г.684
13 нояб. 2026 г.640
15 нояб. 2026 г.527

Самые просматриваемые за месяц

  1. 01

    Почему я снова пишу про цифровую архивацию, так это потому что военные действия не только между РФ и Украиной, но и вокруг Ирана и не только активно перешли на сетевую инфраструктуру. Как через уничтожение дата-центров, так и усиление кибератак и того что хакеры явно применяют ИИ агенты для автоматизации своей работы. Тут доступ к фронтирным моделям со снятыми ограничениями может играть большую роль. Из последнего: разрушение датацентров Яндекса, взлом и недоступность сайтов Росстата, взлом провайдера Beget и разрушение многих датацентров на территории Украины, а также прошлые атаки Ирана на датацентр AWS в регионе и слухи что в любой момент конфликт Израиль/США/Иран может продолжится и весь регион снова будет под угрозой атак, в том числе по датацентрам. Я даже не знаю что из этого обозначить как нечто наиболее критичное, оно все вместе и в частности про уничтожение цифровых материалов массовым образом. Что-то, при этом, можно восстанавливать, например, мы архивировали Росстат неоднократно, а украинские сайты куда меньше выпадали из Common Crawl и Интернет архива. Возможно что многие российские частные (негосударственные) сайты тоже, но это неточно, поскольку российские сайты куда чаще находятся за геоблокировками. К чему это я. Не забывайте делать резервные копии. Всего. #digitalpreservation #webarchives

    Текстизменён
    Просмотры1,14 тыс.
    Пересылки6
    Реакции23
    Комментарии0
  2. 02

    Без текста

    Фотоальбом
    Просмотры1,08 тыс.
    Пересылки14
    Реакции—
    Комментарии—
  3. 03
    Просмотры1,06 тыс.
    Пересылки10
    Реакции27
    Комментарии3
  4. 04

    Без текста

    Фотоальбом
    Просмотры1,02 тыс.
    Пересылки14
    Реакции—
    Комментарии—
  5. 05

    Без текста

    Фотоальбом
    Просмотры1,02 тыс.
    Пересылки14
    Реакции—
    Комментарии—

Новые посты

#7894Текстизменён

В продолжение про книги которые я ранее публиковал, про каталоги данных и про инвентаризацию данных, есть темы на которые я хочу завершить свои черновики и превратить в книгу/книги. Одна из них - это "Понимание данных" о том как человечество работает с данными, особенности структуризации данных, почему таблицы выглядят как таблицы, что такое семантическое аннотирование, разметка и семантические типы данных. Часть про семантические типы и разметку - самая практическая, остальное скорее про некоторые разные формы систематизации мышления и про то что 99% способов и результатов представления данных упаковываются в ограниченное число шаблонов: смысловых и технических. А вторая Скрытые данные про извлечение метаданных и иных скрытых сведений из не самых очевидных файлов, документов, мест на компьютере и тд. Таких скрытых данных немало, скрытые вкладки в Excel, замазанный, но реально доступный текст в PDF, множественные вложенные объекты выдающие реальный процесс создания документа и так далее. Вот эту тему я давно откладываю и откладываю поскольку она куда ближе к темам форенсики и OSINT, хотя и пересекается отчасти с работами по архивации цифровых объектов. Причем и то и другое теперь делается по другому если есть доступ к ИИ агентам и возможность загрузить туда данные/файл. С одной стороны, а с другой стороны, например, и сокрытие данных/метаданных стало принципиально проще. #thoughts

Открыть в Telegram
Просмотры527−38%к среднему
Пересылки2
Реакции19
Комментарии0
Динамика просмотровСкрыть динамику

Рост просмотров

Часов после публикации

Показать таблицей
Часов после публикацииПросмотры
0 ч0
5 ч352
19 ч527
  1. Через 6 часов352
  2. Через 24 часа527
  3. Всего сейчас527
#7893Превью ссылки

Полезное чтение про данные, технологии и не только: - Commission turns to artificial intelligence to write better laws Еврокомиссия планирует начать применять ИИ для подготовки лучших и более понятных законов. Похвальная инициатива, главное не забыть следующий шаг когда ИИ будет заменять законотворцев, а не помогать им. - AI Shakes Volunteer Sites о том как ИИ меняет онлайн сообщества, разрушает StackOverflow, помогает "процветанию" Github'а и Reddit'а. - Satellite Imagery Is Being Restricted. The U.S. Government Is to Blame ссылка на пересказ статьи в NYT о том как Пр-во США влияет на коммерческие компании предоставляющие доступ к спутниковым снимкам скрывать сведения о чувствительных местах. Сама статья за пэйволом, но общая мысль очевидна. Государство крупнейший покупатель у этих компаний, а деньги оказываются отличным рычагом влияния. - A shared agenda for the economics of data научный обзор ключевых вопросов экономики данных в контексте использования ИИ. #readings #data #aiagents

Открыть в Telegram
Просмотры585−31%к среднему
Пересылки2
Реакции12
Комментарии0
Динамика просмотровСкрыть динамику

Рост просмотров

Часов после публикации

Показать таблицей
Часов после публикацииПросмотры
0 ч0
10 ч370
38 ч496
51 ч585
  1. Всего сейчас585
#7892Превью ссылки

К вопросу о изменении моделей использования сервисов с помощью агентов. Когда я недавно доделывал атлас по геоданным Армении, то одной из задач в нем было в том чтобы собрать доступные геоданные по стране. Собственно по Армении их никогда не было особо много общедоступных да и атлас я очищал от ошибок с помощью Claude, собственно из-за этих ошибок и его анонс затянулся больше чем на полгода, в TerriaMaps надо было исправить несколько неприятных багов с кодировками, отображением некоторых данных и так далее. Долго ли коротко ли, но я подключил агента к API Dateno и поставил ему задачей найти картографические слои относящиеся к Армении. К слову, разобрался он с API моментально и столь же моментально выжрал квоту в 200 запросов в день на тарифе Free. Собственно это, конечно, стремительно меня мотивировало стать коммерческим подписчиком создаваемого нами сервиса😂 Потому что так-то для работы с данными я всегда мог подключиться к поисковому индексу через SQL напрямую, но агента напрямую пускать туда точно желания не было, а у Dateno хорошо работающие API и MCP. По Армении я тогда все что было быстро найти нашел и на maps.opendata.am можно посмотреть какие геослои доступны. Но захотеть сделать такой красивый атлас по другой стране или региону, то квота нужна побольше, даже бесплатная. Собственно это особенность того что ИИ агенты жрут API квоты как не в себя. И выбирая между сервисами, более лояльные квоты экономнее. Я ранее рассказывал как искалновые каталоги данных с помощью сервиса Censys (глобальная база сканирования IP адресов и веб-серверов) и выходило это очень накладно. После того как я переключился на китайский FOFA который имеет убогий веб интерфейс, но отлично работающее API с хорошей квотой, вот тогда процесс и пошел отлично. #thoughts #data #dateno

Открыть в Telegram
Просмотры695−18%к среднему
Пересылки4
Реакции6
Комментарии4
Динамика просмотровСкрыть динамику

Рост просмотров

Часов после публикации

Показать таблицей
Часов после публикацииПросмотры
0 ч0
6 ч366
18 ч535
30 ч575
59 ч652
74 ч695
  1. Через 6 часов366
  2. Через 24 часа535
  3. Всего сейчас695
#7891Превью ссылки
Просмотры637−25%к среднему
Пересылки6
Реакции6
Комментарии0
Динамика просмотровСкрыть динамику

Рост просмотров

Часов после публикации

Показать таблицей
Часов после публикацииПросмотры
0 ч0
10 ч376
34 ч637
  1. Всего сейчас637
#7890Фото
Просмотры635−25%к среднему
Пересылки9
Реакции10
Комментарии0
Динамика просмотровСкрыть динамику

Рост просмотров

Часов после публикации

Показать таблицей
Часов после публикацииПросмотры
0 ч0
1 ч269
13 ч514
25 ч635
  1. Через 1 час269
  2. Через 24 часа635
  3. Всего сейчас635
#7889Текст
Просмотры779−8%к среднему
Пересылки0
Реакции19
Комментарии8
Динамика просмотровСкрыть динамику

Рост просмотров

Часов после публикации

Показать таблицей
Часов после публикацииПросмотры
0 ч0
8 ч549
32 ч723
72 ч779
  1. Через 24 часа723
  2. Всего сейчас779
#7888Текстизменён

Очередная порция размышлений вслух: - Новые фронтирные модели всё более приближаются к тому чтобы заменять уже не джуниоров, а миддлов и даже синьёров. Уже сейчас они проектируют архитектуру ПО очень даже хорошо, а делают ревизию документов лучше многих экспертов. Я проверял на документах на которые я несколько лет назад писал отзывы и они находили в них даже больше ошибок и неточностей чем я тогда. - Я не просто так жалуюсь на рост потоков технологического спама. Сегодня зарепотил два abuse report'а на пользователей на Github'е которые заваливали задачами и пул реквестами, даже если по делу, но сгенерированными ИИ ботами. В первом случае кто-то делал по тысяче пул реквестов в сутки, а во втором рекламировал свой сервис ревизии кода. - Для фаундеров и руководителей ИТ компаний такой ажиотаж вокруг ИИ не на пустом месте. ИИ инструменты как создают новые ниши, так и разрушают существующие бизнес модели. Уже почти невозможно сидеть на попе ровно и получать деньги с клиентов за продление лицензий или ждать новых клиентов. При разработке любого нового продукта надо учитывать что кто-угодно может сделать его клон в кратчайшие сроки. #thoughts

Открыть в Telegram
Просмотры815−4%к среднему
Пересылки6
Реакции19
Комментарии9
Динамика просмотровСкрыть динамику

Рост просмотров

Часов после публикации

Показать таблицей
Часов после публикацииПросмотры
0 ч0
12 ч429
36 ч746
72 ч815
  1. Всего сейчас815
#7887Фотоальбом
Просмотры944+11%к среднему
Пересылки19
Реакции—
Комментарии—
Динамика просмотровСкрыть динамику

Рост просмотров

Часов после публикации

Показать таблицей
Часов после публикацииПросмотры
0 ч0
2 ч249
14 ч586
26 ч830
74 ч944
  1. Через 1 час249
  2. Через 24 часа830
  3. Всего сейчас944
#7886Фотоальбом
Просмотры924+9%к среднему
Пересылки19
Реакции6
Комментарии0
Динамика просмотровСкрыть динамику

Рост просмотров

Часов после публикации

Показать таблицей
Часов после публикацииПросмотры
0 ч0
2 ч261
14 ч586
26 ч815
74 ч924
  1. Через 1 час261
  2. Через 24 часа815
  3. Всего сейчас924
#7885Превью ссылки

Полезные ссылки про данные, технологии и не только: - The Data Product Platform Navigator на сайте Мартина Фаулера обзор того как создавать дата продукты и дата мэш. С одной стороны концептуально описано многое неплохо, а с другой слишком часто в описании концептуальных вещей автор сваливается в технологическую конкретику которая у многих может сильно отличаться. - auto-ontology фреймворк для Python от NVIDIA который превращает базы данных в онтологии. Выглядит как самый серьезный шаг в сторону генерации запросов к данным с помощью ИИ и замена/дополнение всего что касается text-to-sql - Augmented Visual Analytics opensource продукт текст-в-аналитику, на основе данных дает ответы и строит графики. Умеет подключаться к базам данных и дата файлам. - I discovered a sound that leaks your exact location смотрится как документальный детектив, автор объясняет как из звуковой дорожки идентифицировать точное местонахождение места ее записи, разбирая конкретный пример очень подробно. Параноикам на заметку, не выкладывайте звуковые и видео файлы без нужды #dataengineering #ai #datatools #dataviz #osint

Открыть в Telegram
Просмотры764−10%к среднему
Пересылки14
Реакции8
Комментарии0
Динамика просмотровСкрыть динамику

Рост просмотров

Часов после публикации

Показать таблицей
Часов после публикацииПросмотры
0 ч0
8 ч436
32 ч688
68 ч764
  1. Через 6 часов436
  2. Через 24 часа688
  3. Всего сейчас764

Все посты

Связи