Судя по описанию — сыпь только между пальцами и на ладони, зуд то усиливается, то стихает, при растягивании кожи видны мелкие узелки-«бусинки» — такая картина требует очного осмотра дерматологом или педиатром, так как похожие проявления могут быть и при контактном раздражении кожи, и при дисгидротической экземе, и, что важно, при чесотке (при ней зуд часто периодический, а под кожей могут прощупываться характерные ходы). Заочно отличить эти состояния сложно, а тактика лечения будет разной.
Пока рекомендую понаблюдать: есть ли высыпания где-то ещё (запястья, живот, между ягодицами), не появилась ли сыпь у других членов семьи, контактирует ли ребёнок с новыми игрушками, песком, животными, бытовой химией или растениями — это поможет исключить контактную причину. Мазь стоит на время отменить, если нет явного улучшения, и не увеличивать частоту приёма антигистаминных препаратов самостоятельно — с учётом синдрома Жильбера любые лекарства лучше подбирать только по назначению врача, чтобы не нагружать печень лишний раз.
При очном визите, скорее всего, понадобится осмотр кожи под увеличением и, возможно, соскоб, чтобы точно определить причину. Если зуд усилится, сыпь станет распространяться дальше или появится нагноение — не откладывайте обращение к врачу.