Re: nosql - кто что использует

2011/8/18 Nikolay Grebnev <nikolaygrebnev@gmail.com>:
> Алексей, еще вопросы по Вашему использованию, если можно  :)
>
> Какого размера текстовые блобы? Примерное клиечество (10 млн/100 млн/1
> миллиард)? Используется для "хранения" (только запись архивная), или для
> чтения и выплевывания клиенту, насколько оперативно это работает, нет ли
> задержек?

Количество - что-то порядка 60-65ММ записей. Блобы в среднем 10-50кб,
с пиками до 16Мб в отдельных случаях.

Читаем и отдаем клиенту через thrift или rest gateway. Насчет времени
доступа, данные такие (за эту неделю):
- 90% percentile: 69.00ms avg, 529.82ms max
- 95% percentile: 92.73ms avg, 555.52ms max

> Просто думаю, а не запихать ли в базу картинки - а то с файловой системой
> как-то не особо нравится работать становится, тк картинок сейчас примерно 10
> млн. Думаю использовать связку nginx + squid (который будет кешировать
> наиболее часто требуемые картинки - те если есть у него то выплевываем
> клиенту, а если нет тогда уже лезем в hbase).
> Но вот начал читать , и народ в массе как-то не особо радуется запихиванию
> картинок в hbase, и больше напирает что если уж надо, то тогда лучше хранить
> просто в hdfs

Я честно говоря не знаю что и как у них работает, но, помнится, около
года назад в мыллисте hbase-users товарищи из imageshack вроде-бы
писали, что работали на тот момент над кластером для их картинок.
Детали лучше покопать в архивах, я особо не следил.

--
Oleksiy Kovyrin
http://kovyrin.net/

--
--
Данное сообщение отправлено Вам, так как Вы являетесь подписчиком группы "RubyOnRails to russian" на группах Google.
FAQ группы находится по адресу: http://ru.wikibooks.org/wiki/RubyFAQ

Для того, чтобы отправить сообщение в эту группу, пошлите его по адресу
ror2ru@googlegroups.com
Чтобы отменить подписку на эту группу, отправьте сообщение по адресу: ror2ru-unsubscribe@googlegroups.com
Дополнительные варианты находятся на странице группы http://groups.google.com/group/ror2ru?hl=ru