TikTok Scraper & Downloader

Сбор и загрузка полезной информации из TikTok.

Логин и пароль не требуются

Это не официальная поддержка API и т.д. Это просто парсер, использующий веб-API TikTok для сбора медиа и связанной метаинформации.

---

---

Содержание

• Возможности
• Планы
• Участие
• Установка
• Использование
  • В терминале
    • Примеры терминала
    • Управление историей загрузок
    • Пакетный сбор и загрузка
    • Пример выходного файла
  • Docker
    • Сборка
    • Запуск
  • Модуль
    • Методы
    • Параметры
    • Использование с Promises
    • Использование с событиями
    • Как получить/установить значение сессии
    • Как получить доступ/скачать видео
    • Пример вывода JSON
      • Методы ленты видео
      • getUserProfileInfo
      • getHashtagInfo
      • getVideoMeta
      • getMusicInfo

Важные замечания

• На данный момент невозможно скачать видео без водяного знака

Возможности

• Сбор неограниченного количества метаданных постов со страниц пользователя, хэштега, трендов или музыкального ID
• Сохранение метаданных постов в файлы JSON/CSV
• Загрузка медиа с водяным знаком и без и сохранение в ZIP-файл
• Загрузка одного видео без водяного знака из CLI
• Подпись URL для выполнения собственных запросов к API TikTok
• Извлечение метаданных со страниц пользователя, хэштега и отдельного видео
• Сохранение предыдущего прогресса и загрузка только новых видео, которые не были скачаны ранее. Эта функция работает только из CLI и только если включён флаг download.
• Просмотр и управление историей ранее загруженных постов в CLI
• Пакетный сбор и загрузка лент пользователя, хэштега, музыки и отдельных видео, указанных в файле

Планы

• CLI: сохранение прогресса во избежание повторной загрузки одних и тех же видео
• Переписать всё на TypeScript
• Улучшить поддержку прокси
• Добавить тесты
• Загрузка видео без водяного знака
• Указывать в выходном файле (csv/json), было ли видео загружено
• Сборка и запуск из Docker
• CLI: пакетный сбор и загрузка
• CLI: загрузка прокси из файла
• CLI: опциональный ZIP
• Обновление API
• Установка WebHook URL (CLI)
• Добавить новый метод для сбора метаданных музыки
• Добавить ручную пагинацию
• Улучшить документацию
• Загружать аудиофайлы
• Веб-интерфейс

Участие

• Не забывайте про тесты```sh yarn test

Подробные описания каждого домена можно найти в соответствующем разделе.```sh
yarn build

Установка

tiktok-scraper требует Node.js v10+ для работы.

Установка из NPM```sh npm i -g tiktok-scraper

**Установка из YARN**```sh
yarn global add tiktok-scraper

ИСПОЛЬЗОВАНИЕ

В терминале```sh

$ tiktok-scraper --help

Usage: tiktok-scraper [options]

Commands: tiktok-scraper user [id] Scrape videos from username. Enter only username tiktok-scraper hashtag [id] Scrape videos from hashtag. Enter hashtag without # tiktok-scraper trend Scrape posts from current trends tiktok-scraper music [id] Scrape posts from a music id number tiktok-scraper video [id] Download single video without the watermark tiktok-scraper history View previous download history tiktok-scraper from-file [file] [async] Scrape users, hashtags, music, videos mentioned in a file. 1 value per 1 line