1. Herzlich willkommen bei WPDE.org, dem grössten und ältesten deutschsprachigen Community-Forum rund um das Thema WordPress. Du musst angemeldet oder registriert sein, um Beiträge verfassen zu können.
    Information ausblenden

robots.txt trotz deaktivierung aktiv?

Dieses Thema im Forum "Allgemeines" wurde erstellt von falkster, 29. Oktober 2014.

Schlagworte:
  1. falkster

    falkster Member

    Registriert seit:
    1. Mai 2013
    Beiträge:
    5
    Zustimmungen:
    0
    Hallo Leute,

    Ich habe bei meinem Blog die robots.txt Datei während 2 Jahren aktiviert. Damit sie nicht indexiert wird.
    Jetzt möchte ich die Website öffentlich machen und habe die robots.txt deaktiviert.
    Trotzdem ist aber die robots in der functions.php immer noch vorhanden.

    Was muss ich am Code ändern, damit Google & Co nicht geblockt wird:

    Besten Dank für eure Hilfe

    }


    /**
    * Display the robots.txt file content.
    *
    * The echo content should be with usage of the permalinks or for creating the
    * robots.txt file.
    *
    * @since 2.1.0
    */
    function do_robots() {
    header( 'Content-Type: text/plain; charset=utf-8' );


    /**
    * Fires when displaying the robots.txt file.
    *
    * @since 2.1.0
    */
    do_action( 'do_robotstxt' );


    $output = "User-agent: *\n";
    $public = get_option( 'blog_public' );
    if ( '0' == $public ) {
    $output .= "Disallow: /\n";
    } else {
    $site_url = parse_url( site_url() );
    $path = ( !empty( $site_url['path'] ) ) ? $site_url['path'] : '';
    $output .= "Disallow: $path/wp-admin/\n";
    }


    /**
    * Filter the robots.txt output.
    *
    * @since 3.0.0
    *
    * @param string $output Robots.txt output.
    * @param bool $public Whether the site is considered "public".
    */
    echo apply_filters( 'robots_txt', $output, $public );
    }
     
  2. falkster

    falkster Member

    Registriert seit:
    1. Mai 2013
    Beiträge:
    5
    Zustimmungen:
    0
    Hier noch die Warnung von Google Webmaster tools
    webmastertools.jpg
     
  3. falkster

    falkster Member

    Registriert seit:
    1. Mai 2013
    Beiträge:
    5
    Zustimmungen:
    0
    Zusätzliche Frage, wenn ich eine eigenen robots.txt mache wie folgt. "Überschreibt" das die functions.php?

    User-agent: *
    Disallow: /wp-login.php
    Disallow: /wp-register.php
    Disallow: /wp-includes/
    Disallow: /wp-admin/




    User-agent: googlebot
    Disallow: /wp-content/
    Disallow: /wp-admin/
    Disallow: /index.php
    Disallow: /*?
    Disallow: /*.js$
    Disallow: /*.inc$
    Disallow: /*.css$




    User-agent: googlebot-image
    Disallow: /wp-includes/




    User-agent: mediapartners-google
    Disallow: /*?*
    Allow: /wp-content/
    Allow: /tag/
    Allow: /*.php$
    Allow: /*.js$
    Allow: /*.inc$
    Allow: /*.css$
    Allow: /*.gz$
    Allow: /*.cgi$
    Allow: /*.wmv$
    Allow: /*.cgi$
    Allow: /*.xhtml$
    Allow: /*.php*
    Allow: /*.gif$
    Allow: /*.jpg$
    Allow: /*.png$




    User-agent: ia_archiver
    Disallow: /




    User-agent: duggmirror
    Disallow: /
     
  4. maxe

    maxe Well-Known Member
    Ehrenmitglied

    Registriert seit:
    1. Mai 2008
    Beiträge:
    19.581
    Zustimmungen:
    277
    Was hast du denn in den WP-Einstellungen "Lesen" bzgl. Sichtbarkeit eingestellt?
     
  5. falkster

    falkster Member

    Registriert seit:
    1. Mai 2013
    Beiträge:
    5
    Zustimmungen:
    0
    Die Box bei "Verbietet Suchmaschinen die Website zu indexieren" ist unchecked - kein Haken.
     
  6. maxe

    maxe Well-Known Member
    Ehrenmitglied

    Registriert seit:
    1. Mai 2008
    Beiträge:
    19.581
    Zustimmungen:
    277
    Dann sollte der Indexierung nix mehr im Wege stehen. Du kannst aber auch gern eine eigene robots.txt ins Root von WP ablegen.
     
  1. Diese Seite verwendet Cookies, um Inhalte zu personalisieren, diese deiner Erfahrung anzupassen und dich nach der Registrierung angemeldet zu halten.
    Wenn du dich weiterhin auf dieser Seite aufhältst, akzeptierst du unseren Einsatz von Cookies.
    Information ausblenden
  1. Diese Seite verwendet Cookies, um Inhalte zu personalisieren, diese deiner Erfahrung anzupassen und dich nach der Registrierung angemeldet zu halten.
    Wenn du dich weiterhin auf dieser Seite aufhältst, akzeptierst du unseren Einsatz von Cookies.
    Information ausblenden