Донецкий техникум промышленной автоматики

Беллінгкет - Як архівувати матеріали з відкритих джерел - Беллінгкет

  1. Сторонні платформи для архівування
  2. Archive.today
  3. Збереження фотографій і відео
  4. Інші рішення по архівації

Всі картинки в цій статті доступні в повному розмірі при натисканні на них.

Проводячи розслідування за відкритими джерелами, важливо замислюватися над тим, як архівувати матеріали, які ви вивчаєте. Наприклад, користувач може видалити пост у соціальній мережі вже після публікації вашого розслідування, або відео з шокуючими кадрами (наприклад, військового злочину в Сирії) може бути видалено через цензурну політики YouTube .

Існують дві основні причини необхідності архівувати всі цифрові свідоцтва, що застосовуються в розслідуванні: збереження їх на випадок видалення з оригінального джерела і доказ аудиторії, що матеріал (якщо він був видалений) дійсно існував в тому вигляді, в якому ви його уявляєте. Скріншоти легко підробити, тому вкрай важливо знайти спосіб зберігати матеріали так, щоб показати, що ви не могли змінити їх зміст.

Сторонні платформи для архівування

Для більшої частина контенту, в тому числі постів в соціальних мережах, новинних статей та інших веб-сторінок, є два сервісу, які зазвичай спрацьовують: Archive.today і Archive.org. Ці сайти зберігають веб-сторінки на власних серверах, після чого вони стають доступні за посиланням. Крім того, обидва сайти зберігають сторінки на конкретний момент часу, тому можна спостерігати зміни між різними архівації, наприклад до і після вирізання інформації зі статті. Ми рекомендуємо зберігати матеріали на обох сайтах, щоб максимізувати кількість архівіруемого контенту. Ми коротко опишемо роботу обох сайтів і їх ефективність при архівування сторінок різних популярних соціальних мереж. В цілому Archive.today більш пристосований для збереження сторінок в соціальних мережах, так як робить це через спеціально створений акаунт, тоді як archive.org бачить тільки повністю публічні сторінки, які не потребують аккаунта.

Archive.today

З двох основних сайтів-архіваторів Archive.is більш ефективний при роботі з соціальними мережами. Однак він діє далеко не так давно, як archive.org. Його слід вважати менш стабільним, оскільки він набагато скромніше за масштабами. Крім того, цей сайт заблокований в різних країнах, оскільки екстремістський контент іноді поширюється через посилання на archive.today. Альтернативні посилання на цей сайт (Archive.is, Archive.li, Archive.ch ...) дозволяють обійти цензуру деяких (але не всіх) країн, наприклад Росії, Китаю та Фінляндії.

Archive.today зберігає сторінки виключно за запитами користувачів, а не автоматично, як Archive.org. Щоб зберегти сторінку на цьому сайті, просто введіть в поле в червоному прямокутнику посилання на сторінку, яку хочете зберегти.

Всі картинки в цій статті доступні в повному розмірі при натисканні на них

Ви також можете архівувати сторінки, зберігши ятати у вашому браузері, що дозволяє зберігати в один клік сторінки, на яких ви перебуваєте. Для цього збережіть нову сторінку в ваших закладках (або обраному) з посиланням:

javascript: void (open ( 'https://archive.today/?run=1&url='+encodeURIComponent (document.location)))

Тепер просто натисніть на новостворену закладку, щоб зберегти будь-яку сторінку, відкриту у вас в браузері.

Крім того, можна перетягнути кнопку на головній сторінці Archive.today на вашу панель закладок, щоб не створювати закладку вручну.

Щоб перевірити, зберігали чи вже якусь посилання, введіть її в поле в синьому прямокутнику.

Щоб перевірити, зберігали чи вже якусь посилання, введіть її в поле в синьому прямокутнику

Є більш просунуті способи пошуку збережених сторінок, якщо ви не знаєте точну посилання. Наприклад, якщо ви хочете знайти всі заархівовані статті Bellingcat з тегом MENA (Middle East North Africa, Близький Схід і Північна Африка), введіть у пошук наступне:

Наприклад, якщо ви хочете знайти всі заархівовані статті Bellingcat з тегом MENA (Middle East North Africa, Близький Схід і Північна Африка), введіть у пошук наступне:

Зірочка в кінці посилання дозволить знайти всі статті на сайті Bellingcat, посилання на які починаються з «news / mena». Сюди входять всі статті в розділі «MENA» нашого сайту.

Сюди входять всі статті в розділі «MENA» нашого сайту

У результатах з'являться статті, вручну збережені користувачами, які ввели посилання, а також сторінки з посиланнями на базу даних збережених сторінок Archive.org. У деяких випадках можна відкрити різні версії однієї і тієї ж сторінки, якщо до статті вносилися зміни.

Ще одна корисна функція Archive.today - можливість зберегти цілу сторінку як зображення, навіть якщо вона дуже довга. Однак це не слід використовувати як заміну посиланням на архів, оскільки скріншоти можна редагувати після збереження.

Archive.today відносно успішно архівує сторінки в соціальних мережах, однак його робота далеко не ідеальна. Нижче наведені збережені сторінки з різних соціальних мереж. Як правило, заархівувати сторінку соціальної мережі, захищену якимись налаштуваннями приватності, на кшталт «цю сторінку можуть бачити тільки друзі друзів» на Фейсбуці, за допомогою сторонніх архіваторів на кшталт Archive.today або Archive.org практично неможливо.

У прикладах нижче натисніть на гіперпосилання на кожну з соціальних мереж, щоб переглянути збережену сторінку на Archive.today.

Facebook :

Працює досить добре, за винятком фотографій і відео, вбудованих в пости.

Instagram :

Не працює.

Twitter :

Працює дуже добре, за винятком вбудованого в твіти контенту, зокрема фотографій, відео та посилань.

ВКонтакте (ВК)

Працює дуже добре, за винятком вбудованих фотографій і відео.

Однокласники (ОК)

Працює дуже добре, за винятком вбудованих фотографій і відео.

YouTube

Може зберігати тільки метадані і текст, але не самі відео.

Archive.org

«Інтернет-Архів», заснований в 1996 році, вже понад 20 років зберігає веб-сторінки і має значний бюджет, що забезпечує стабільність, на яку не можна розраховувати щодо Archive.today. Хоча у Archive.org є безліч чудових проектів, в першу чергу нас цікавить Internet Archive Wayback Machine (Web.archive.org), яка дозволяє користувачам архівувати конкретні сторінки і переглядати сторінки, заархівовані іншими користувачами.

Як і у випадку з Archive.today, процес пошуку і збереження веб-сторінок дуже простий. Введіть посилання в рядок пошуку у верхній частині сторінки, щоб переглянути архівні версії. Щоб зберегти сторінку за посиланням, введіть її справа внизу.

Щоб зберегти сторінку за посиланням, введіть її справа внизу

У той час як Archive.today зберігає сторінки тільки за запитами користувачів, Archive.org використовує як запити користувачів, так і скрипти для автоматичного збереження сторінок. Наприклад, заголовна сторінка Bellingcat була сфотографована більше 800 разів з дня покупки домену в травні 2014 року. Напевно лише невелика їх частина була збережена за запитами користувачів.

Напевно лише невелика їх частина була збережена за запитами користувачів

При збереженні звичайних веб-сторінок і новинних статей Archive.org часто дає фору Archive.today, оскільки дозволяє переходити при натисканні на інші заархівовані сторінки. Наприклад, за допомогою Internet Archive Wayback Machine можна переміщатися по значній частині сайту Bellingcat, як ніби ви в 2014 році, оскільки всі ці сторінки були збережені близько 4 років тому. На Archive.today можна знайти набагато менше заархівіруваних сторінок.

Archive.org гірше справляється з соціальними мережами, ніж Archive.today, але все одно іноді пригождается.

Facebook

Добре працює з повністю публічними сторінками, але, на відміну від Archive.today, не має доступу до сторінок, які вимагають аккаунта на ФБ.

Instagram

Не працює.

Twitter

Працює дуже добре, за винятком вбудованого в твіти контенту, зокрема фотографій, відео та посилань.

ВКонтакте (ВК)

Добре працює з повністю публічними сторінками, але, на відміну від Archive.today, не має доступу до сторінок, які вимагають аккаунта в ВК.

Однокласники (ОК)

Добре працює з повністю публічними сторінками, але, на відміну від Archive.today, не має доступу до сторінок, які вимагають аккаунта на ОК.

YouTube

Не дуже добре працює на основному сайті Wayback Machine, оскільки він погано зберігає навіть метадані і текст з відео.

Однак у Archive.org є окремий проект під назвою YouTube Crawl, який архівує відео з YouTube разом з метаданими. Детальніше про участь в їхньому проекті можна прочитати тут . Це вимагає більших зусиль, ніж просте рішення в один клік на web.archive.org і archive.today.

Збереження фотографій і відео

З попереднього розділу ви дізналися, що ні Archive.org, ні Archive.today не можуть зберігати фотографії і відео з Інстаграма і YouTube, а також відчувають проблеми при збереженні фотографій з Фейсбуку, ВК і інших сайтів. Створення сторонньої «нейтральної» платформи для збереження медіа-матеріалів з цих сайтів набагато складніше. Замість цього, необхідно завантажувати матеріали окремо, а потім надавати додаткові матеріали (наприклад, скріншоти з метаданими, матеріали на сайтах-дзеркалах і т.п.), щоб довести справжність скріншотів і відео.

YouTube

Є безліч сайтів, що дозволяють завантажувати відео з YouTube, наприклад KeepVid , Y2Mate та інші. Архівувати відео з YouTube зовсім не складно, якщо у вас є достатньо місця для їх збереження на жорсткому диску або в хмарі. Не забудьте зробити скріншот метаданих і зберегти сторінку на Archive.today, щоб зберегти назву, дату завантаження і опис, навіть якщо саме відео не збережеться на сторінці.

Instagram

На жаль, архівувати сторінки в Instagram дуже важко. Найчастіше ми можемо хіба що сподіватися на кросспост на іншому сайті (багато сумнівні сайти «запозичують» контент Instagram і розміщують його у себе) або вручну зберігати зображення в повному дозволі.

Щоб відкрити фото в Instagram в повному дозволі, дотримуйтеся наведених нижче інструкцій:

  1. Знайдіть посилання на фотографію в Instagram і видаліть всі дані після її ID. Наприклад, для фотографії з посиланням instagram.com/p/ BfZJzBphUr1 / ID буде BfZJzBphUr1. Якщо після цього ID є ще щось (such as «taken-by = username»), видаліть цю частину.
  2. Введіть в кінці посилання «/ media /? Size = l» (рядкова L). Для посилання instagram.com/p/BfZJzBphUr1/ результат буде instagram.com/p/BfZJzBphUr1/ media /? Size = l
  3. Тепер відкриється фото Instagram в максимально доступному дозволі в форматі JPG. У разі згаданого вище поста це дасть наступного результат.

Щоб зберегти відео з Instagram, можна скористатися різними сайтами на кшталт KeepVid, наприклад Gramblast і DreDown .

Facebook

Завантажувати фотографії з високою роздільною здатністю з Фейсбуку значно простіше, ніж з Інстаграма, оскільки ця функція вбудована в призначений для користувача інтерфейс сайту. Виберіть «Опції», а потім «Зберегти» в меню фотографії, щоб завантажити її з серверів Фейсбуку. Можливо, зображення буде не того ж дозволу, що на фотокамері, але це краще, що можна завантажити з самого Фейсбуку.

Можливо, зображення буде не того ж дозволу, що на фотокамері, але це краще, що можна завантажити з самого Фейсбуку

Зберігати відео з Фейсбуку трохи складніше, але все одно порівняно просто. При перегляді відео натисніть на нього правою кнопкою і виберіть «показати посилання». Тепер ви можете копіювати це посилання і вставити її на сторонній сайт, щоб скачати відео.

Тепер ви можете копіювати це посилання і вставити її на сторонній сайт, щоб скачати відео

Як і у випадку з YouTube і Instagram, є кілька сторонніх сайтів, які дозволяють завантажувати відео з серверів Фейсбуку на той випадок, якщо користувач, який завантажив матеріал, видалить його. FBDown.net працює відмінно, і на ньому мало реклами і спливаючих вікон. Вставивши посилання на відео, яку ви скопіювали з джерела, ви можете завантажити це відео в найкращій якості за посиланням в червоному прямокутнику нижче.

Вставивши посилання на відео, яку ви скопіювали з джерела, ви можете завантажити це відео в найкращій якості за посиланням в червоному прямокутнику нижче

ВК

Зберігати фотографії з ВК в повному дозволі дуже просто: потрібно вибрати «показати оригінал» в меню фотографії, і вона відкриється в максимальному доступному дозволі. Навіть якщо користувач видалить фотографію зі своєї сторінки, посилання в ВК із зображенням в повному дозволі залишиться назавжди.

Зберігати відео з ВК трохи складніше, ніж з YouTube, але це дозволяють зробити різні безкоштовні (і платні) інструменти. Наприклад, GetVideo.org дозволяє завантажувати відео, завантажені в ВК, в оригінальному дозволі. Щоб отримати посилання на відео, натисніть на нього правою кнопкою і виберіть «Копіювати посилання на відео».

Щоб отримати посилання на відео, натисніть на нього правою кнопкою і виберіть «Копіювати посилання на відео»

Слід зазначити, що на GetVideo не слід натискати «Best Quality». Замість цього виберіть найбільше конкретне дозвіл (напр. 720p). Враховуйте, що файли з цього сайту викачуються досить повільно.

Враховуйте, що файли з цього сайту викачуються досить повільно

ОК

Кращий спосіб зберігати фотографії в повному або майже повному дозволі - вибрати «на весь екран», а потім зберегти зображення або зробити скріншот.

Для скачування відео з «Однокласників» є менше сайтів, ніж для інших соціальних мереж, однак вони все ж існують, наприклад Video-Download.co .

Інші рішення по архівації

Найчастіше використовувати описані вище способи скачування веб-сторінок або відео неможливо, оскільки вони захищені налаштуваннями приватності (що обмежує доступ з таких сайтів, як Archive.today) або використовують маловідомі платформи для програвання відео, з якими не працюють такі сайти, як KeepVid. Всі рішення, наведені вище в цьому керівництві, безкоштовні. Однак деякі інші платні або умовно безкоштовні сервіси можуть полегшити вам життя. Ми не станемо рекомендувати вам, як витрачати гроші, проте дослідники Bellingcat успішно використовували наведені нижче рішення (а одне навіть розробили самі):

Деякі програмні рішення дозволяють завантажувати відео з більшості сайтів, навіть якщо там не використовується YouTube або інші популярні платформи. Video Download Capture від Apowersoft працює на диво добре для практично всіх вбудованих відео, а також (в деяких випадках) лайвстрімов. Однак цей сервіс вимагає оплати для повноцінного використання. Ця програма визначає, що в браузері програється відео, а потім (зазвичай успішно) завантажує його з оригінального джерела. Якщо ви намагаєтеся завантажити конкретне відео і не можете знайти іншого рішення, можливо, варто скористатися пробним періодом цієї програми. Якщо ви не можете скористатися пробним періодом або не хочете купувати цю програму, попросіть у Твіттері автора цієї статті (@AricToler) допомогти завантажити конкретне відео.

У разі, якщо веб-сторінки захищені налаштуваннями приватності, дуже складно знайти рішення, здатне створити повноцінну сторонню архівну копію сайту. Просте збереження сторінок в форматі HTML вкрай незручно, оскільки створює на жорсткому диску безліч підпапок. Альтернативний варіант - зберегти сторінку як PDF, або роздрукувавши її в PDF (Файл -> Друк -> Роздрукувати в PDF), або скориставшись Adobe Create для збереження сторінки в PDF .

Альтернативний варіант - зберегти сторінку як PDF, або роздрукувавши її в PDF (Файл -> Друк -> Роздрукувати в PDF), або   скориставшись Adobe Create для збереження сторінки в PDF

При цьому цілком можливо змінювати вміст сторінок в самому PDF-файлі. На даний момент можливо найбільш заслуговує на довіру, нехай і не ідеальний спосіб демонстрації вмісту захищених сторінках - запис екрану (список простих рішень для цієї процедури див. тут ) Під час перегляду сторінки.

тут   ) Під час перегляду сторінки

Нарешті, якщо ви ведете багато онлайн-досліджень і хочете скористатися автоматичним рішенням по стеженню, щоб відновити свої кроки, пропонуємо скористатися Hunch.ly , Розробленим автором Bellingcat і майстром роботи з Python Джастіном Сейтцем. Коли цей плагін активний, він автоматично зберігає кожну сторінку, яку ви відвідуєте в ході розслідувань. Якщо одна з цих сторінок згодом буде видалена, а ви забудете її заархівувати, на допомогу прийде Hunch.ly.

Чи використовуєте ви інші сайти і ресурси для архівації веб-сторінок, зображень і відео? Пропонуйте свої варіанти в коментарях, якщо ви вважаєте, що їх варто додати в це керівництво.

Today/?
Введіть в кінці посилання «/ media /?
Чи використовуєте ви інші сайти і ресурси для архівації веб-сторінок, зображень і відео?