Пользуемся на проекте уже минимум год.
Из проблем, которые обнаружились не только с инструментом, но и на проекте и т.д.:
- плохо работает с динамическими элементами - приходилось выставлять ожидания и снимать эталонные скриншоты целиком всей видимой части браузера;
- для того, чтобы запустить тесты на OS Windows пришлось доставать "админский бубен" и не один раз;
- не удалось запустить тесты в связке gemini + selenium WD (latest) + firefox (> 52 or latest);
- не нашел нормальную интеграцию с jenkins + browserstack;
- при снятии эталонных скринов целиком, то в них попадает очень много мелких багов, которые никогда не будут исправлены;
- почти после каждого релиза продукта, особенно, когда менялась верстка страницы, приходилось обновлять эталоны, а у нас их много (примерно 15-30 мин уходило на обновление в два потока - все зависит от ПК);
- как и во всех open source есть определенное количество дефектов, которые "мешают" работать.
Часть проблем возможно и не имеют прямой связи с данным инструментом. Для запуска локально тестов очень неплох. В планах запустить тест-драйв аналогов gemini, если дойдут руки.
Вывод: попробовать однозначно.