Mitschel: robots.txt oder Meta?

Beitrag lesen

ich versuch gerade herauszufinden, was da eigentlich der große unterschied zwischen robots meta und robots.txt ist? klar, in der .txt kann ich ganze verzeichnisse ausschließen. wiederum habe ich hier im forum auch gelesen, dass die .txt von manchen suchmaschinen gar nicht beachtet wird. Daher die Frage: ist es sinnvoll, beide methoden zu verwenden? oder ist das dann nicht irgendwie "doppelt gemoppelt"?
ich hoffe ihr könnt mir weiterhelfen!

mfg