КЛУБ СТОКОВЫХ ФОТОГРАФОВ, ИЛЛЮСТРАТОРОВ, ВИДЕОГРАФОВ и ИИ-ШНИКОВ

2 Chushkin

При выводе в сортировке по новым теоретически индекс может и не использоваться. Но как у них организовано практически - мне неизвестно. Но опять-таки, судя по тому, что процесс выдачи по новым - нестабилен, думаю никакого индекса по номеру фотки Шаттер не строит.

Он строит индексы по поисковым словам. Ну и для сортировки по Most Popular тоже, думаю, используется индекс. Создание этих индексов занимает значительное время.

Update базы - добавление новых фоток - раньше проводился регулярно. Раз в сутки. Сейчас этот процесс стал менее регулярным. Время индексации по ключевым словам и по Most Popular - тоже увеличилось. Думаю это все связано с большой нагрузкой на сервера при добавлении новых фоток. Думаю, что они проводят теперь индексацию и апдейт, когда нагрузка на сервера минимальна. То есть если пошел вал фоток в субботу и воскресенье, то индексация будет проходить, тогда когда этот вал спадает, то есть в среду-четверг.

Я не думаю, что их программисты уж совсем ничего не понимают в теории баз данных.


Всегда присутствует. Так называемый "первичный индекс(ключ)". Если вдруг нету - программиста в дворники!


Это зависит от алгоритмов, которые они используют. В принципе да, просчёт коэфициентов и последующая переиндексация вей базы может занимать многие часы и даже многие дни, если база большая. Но в вообще можно сделать так, что всё будет работать в режиме реального времени - это зависит только от "крутости" их программёров/аналитиков.

100%


Самое правильно, - SS надо нанять нормальных разработчиков ПО и переделать движок. Как минимум, в части работы с БД.
А мы ничего сделать не можем, кроме как попытаться угадать выкрутасы их движка сайта.

По идее, добавление слов в базу и обновление соответствующих индексов делается очень быстро на тех объемах что есть у шутера. 80 тысяч фоток в неделю по 50 слов в каждой, это смехотворные объемы для современного железа. Даже для такой убогой БД как MySQL, которая очень медленна на вставке и обновлении данных, но очень быстра в выборке.
Большую проблему видимо представляют именно операции с самими файлами изображений, и их синхронизация между хранилищами и серверами составляющими кластер шаттерстока.
Все это происходит очевидно из-за того, что за 5 лет механизм шутера не претерпел серьезных изменений. Как взяли софт написанный каким-то студентом на коленке, так он и крутится. Сейчас вроде и деньги есть чтобы сделать нормально, но нет времени. Ибо любой простой (что неизбежно при переходе) - большие деньги, которые они не хотят терять. А мы за это расплачиваемся.

Кто нибудь засылал вектор 22го?
Сейчас ситуация вообще странная файла 20938*** нет в категории Vector, НО файл 20994*** есть. Как такое может быть?
Файлов между 20938447 и 20936290 просто нет. У меня 15 принятых векторов находятся в этом диапазоне.

В последние несколько дней мучаюсь вопросом, - кто нибудь засылал свои работы крутанув конект пару раз вокруг планеты и изменив айпишник (желательно на выглядящий аки американский)? Я это к тому, не является ли эта беда, большей частью, мерой отсекания нашей флудной и пиратской зоны, от благовоспитанных американцев?
Я допускаю что у меня параноя, но ведь тоже может быть реальностью? Просто когда сайт приносивший доход начинает приносить тебе по 50 центов в день (!), это может быть либо провакацией со стороны сайта, либо критической неисправностью системы (например последствием досатаки хакерья)...

Меня тоже посещала такая мысль. Но я её гоню)))
Все равно проверить не могу.

А чего сложного? Хакерского софта в нете - навалом. Да и айпишник подменить не сложно - максимум не пустят на сайт под левым айпи, а так, - ничего плохого сделать не смогут (это не противозаконно). Просто мне заниматься в пустую не хочется, вот и решил узнать, делал ли кто-то такое или нет?!

С теоретической точки зрения к первичному ключу не выдвигается никаких требований по упорядоченности данных в таблице. Он должен быть уникальным для каждой записи в таблице. А индексировать это поле или нет - зависит от конкретной реализации.

А при чем тут айпишник. У Вас в профиле страна проживания указывается. Если бы была какая-то дискриминация по продажам неамериканцев, то информации из профиля достаточно, чтобы отсечь нужных людей.

Благодаря тормознутой индексации мои последние фотки с понедельника висят более-менее наверху, что радует устойчивыми продажами Однако, в связи с грядущим в четверг и пятницу сексгивингом я бы не рекомендовал грузить новые фотки до выходных.

батч с воскресения проиндексировали пару часов назад... понедельник-вторник ушли в "никуда"...

Проиндексировали принятые в понедельник. Принятые вчера (вторник) в категориях не видны

Неужели только у меня такая беда?