Topic: Сервисы исторических данных (Read 277 times)

Подскажите, кто где-нибудь реально скачивал историю биржевого стакана за большой период.
Кое-как получается через coinapi.io но там ограничения для бесплатного API-ключа и данные избыточные.
История стакана LTC/USDT на бинанс за сутки занимает 600Гб при 50bid и 50ask.

На cryptotick.com за годовую историю хотят около 1000$.

добавил, спасибо

Когда имел смартфон то пользовался bituniverse. Там почти все подгружает даже форкдельту

Спасибо

Минусы большинства сервисов:
Цена, отсутствие raw trades, потерянные данные.

Да. Основная важность подобных данных - это бектестинг стратегий и аналитика рынка.
Я наверное могу уже блог целый начать писать по биржам, как они теряли данные, я писал в техподдержку. Что-то исправлялось, что то задним числом добавлялось. В итоге данные у бесплатных сервисов не верифицируются и что там за цифры - хз.

Основываться только на cmc - достаточно спорно. Многие торгуют по trading view. А откуда прилетают цифры редко задают вопросы. Я несколько раз видел различия данных тв и бирж. Кто поставщик - непонятно.

Было бы хорошо знать архитектуру и процессы получения данных у этих сервисов.
Большинство слушают веб сокеты для получения в реальном времени торгов. Но это ультра рисковано на минуту потерять связь с биржой по причине обновления или разрыва связи между ДЦ и все. Данные безвозвратно потеряны.

Да и хранить их дорого очень. И важный момент - поиск.

В общем я потратил на это очень много времени и создам наверное отдельный топик.
А здесь пока обзор рынка оставлю.

Вы наверное не совсем поняли, это не цены посмотреть, а скачать в программу специальную и прогнать специальным тестером свою стратегию по этим данным.

В итоге увидеть статистику и понять работает или нет, увидеть сильные и слабые места, а также достаточно ли преимущества для прибыльной торговли.

В принципе большинству крипто энтузиастов вполне удовлетворяет коинмаркеткэп, он привычный, удобный и большая часть повторяется во всех остальных ресурсах.

Очень полезный пост создал автор, жаль мерита нет. Скоро тестирование торговых систем будет набирать обороты и такие сервисы очень пригодятся, поэтому добавляйте сразу в закладки, если занимаетесь трейдингом, но еще не тестировали нормально свои системы.

спасибо, добавил

финам

Решил сделать подборку сервисов для получения исторических данных с крипто бирж:

1. https://www.coinapi.io/
Платный доступ
Заявлена 101 биржа и 3512 пар
Доступ к системе через websocket и rest, есть лимит на количество выгружаемых данных.
Возможность получения потоков в реальном времени.
Есть orderbooks, trades, ohlc

2. https://www.cryptotick.com/
Платный доступ
Продукт этих же разработчиков.
Разница в том, что здесь скачиваются файлы csv в архивах, в отличии от api, куда нужно уметь достучаться.
Есть все вышеперечисленное, в разной агрегации.

3. https://www.kaiko.com/
Платный доступ
Заявлено 30 бирж и более 5500 торговых пар
Доступ к csv архивам. Есть orderbook, trades, ohlc

4. https://www.cryptodatadownload.com/
Бесплатный доступ.
Заявлено 28 бирж и 545 пар.
Доступно на закачку OHLC с суточной и часовой агрегацией.

5. https://coinograph.io/
Платный доступ
Заявлено 5 бирж и неизвестно сколько пар.
Доступ к API и файлам на скачивание.

6. https://coinmetrics.io
Бесплатный доступ к API и скачиванию файлов.
Неудобное описание и документация.

7. https://bitcoinchain.com
Бесплатный доступ к API через REST
Достаточно ограниченные возможности для сбора данных.
Заявлено 6 бирж, количество пар неизвестно
представитель есть на форуме:
https://bitcointalksearch.org/user/bitcoinchain-85769

8. https://www.quandl.com
Есть платный и бесплатный доступ.
Гигант в мире фин. данных, данные в разном виде и формате.
Является поставщиком данных для trading view.

9. bitcoincharts.com
Бесплатный доступ к файлам, сохраненных с разных бирж и пар
http://api.bitcoincharts.com/v1/csv/

10. coinmarketcap.com
Есть платный и бесплатный доступ.
Заявлено OHLC и котировки. Огромное количество бирж и пар.
Доступ через REST

11. https://www.finam.ru
Есть доступ к котировкам и OHLC, не специализируются на предоставлении через API данных.
Статья по интеграции описана здесь: https://habr.com/post/332700/

12. https://www.bituniverse.org/
Приложение для смартфона. android/ios
Около 10+ бирж.
Позиционируются как:
Your Auto Cryptocurrency Portfolio Manager & Trading Terminal
Как такового доступа к API не предоставляют.

13. https://coinlib.io/
Заявлено 160 бирж
Есть возможность получить объемы рынка через rest api по токену.
Трейдов нет.

14. coingecko
https://www.coingecko.com/api/docs/v3
не нашел ohlc и trades, только информацию об объемах

Дополняйте, если знаете что-то, чего нет в списке.

Кто-то еще использует исторические данные для бэктестинга стратегий?

Спасибо