Der gesamte Code ist ein Hotlinkingverbot, Hotlinking im weitesten Sinne, d.h., es sollen alle Zugriffe von außen per scr-Referenzierung unterbunden werden und eine 403 melden (alternativ lassen manche dann ein spezielles Ersatzbild laden).
Sumas betreiben ebenfalls eine Art Hotlinking und zwar für deren Bildersuche (wer weiß, vielleicht auch für andere Zwecke). Die sollen aber dürfen, möglichst umfassend (am besten alle Bots nennen) und deshalb die Ausnahmen. Gibt auch soziale Netzwerke, die man überlicherweise "lässt" und im Code mit einer Ausnahmezeile bedenkt, z.B. FB.
Am wichtigsten ist die "domain"-Zeile, die ganz normale Besucheranfragen abdeckt, also alles, was direkt vom eigenen Server kommt.
Mit dem vorher-Code hat das aber nicht geklappt, die Bildersuche von Bing und G hat nichts indexiert. Offenbar, weil die Zeilen auf die Referrer-URL abstellen, aber die Crawler gar keine Referrer-URL dabei haben. Offenbar war das früher mal anders, denn all die Blogartikel zum Thema Hotlinking haben die "Referrer-Ausnahmen", sonst hätte ich sie ja nicht verwendet. Jedenfalls scheint die Lösung darin zu bestehen, die Bots direkt zu benennen.
Was
#RewriteCond %{HTTP_REFERER} !^$
angeht, diese Zeile ganz oben gehört normalerweise auch zu so einem Standardcode, habe ich in meinem Fall aber auskommentiert, weil ich momentan noch http auf der Seite habe und in der Folge das Hotlinkingverbot fast nie aktiv wäre, weil bei https --> http die Browser nie einen Referrer mitgeben. Sobald ich auf https umgestellt habe, würde ich die Zeile wieder aktivieren. Die neuen Ausnahmezeilen sollten beide Fälle abdecken.
In der jetzigen Situation, also mit http, scheint es mit den neuen user-Agent-Zeilen zumindest bei G zu funktionieren. Fast die Hälfte der ca. 260 Bilder sind jetzt im Index. Bei Bing hingegen Fehlanzeige, im Gegenteil: Von den drei Bildern, die seltsamerweise schon vorher indexiert waren (k.A. warum), ist seit heute eines verschwunden. Für alle Seiten habe ich bei Bing die Indexierung beantragt und nur so testweise auch für zwei bestimmte Bilder.
Was ist denn der Bilderbot bei Bing, wenn es den msmbot-media nicht mehr gibt? Auf der verlinkten Seite steht nichts von Bildern. Sieht m.E. nicht so aus, als ob der bingbot das machen würde.