Ulasan & penilaian Deepcrawl

DeepCrawl telah menaikkan harga sedikit sejak pertama kali kami melihatnya. Alat sekarang mulai dari $ 89 per bulan, ditagih dari bulan ke bulan; $ 81, 50 bila ditagih setiap tahun). Itu sekitar $ 10 lebih dari biaya sebelumnya, jadi seharusnya tidak menjadi masalah bagi sebagian besar pelanggan alat optimasi mesin pencari (SEO). Namun, yang mungkin membuat Anda tertarik adalah fokus desainnya: alat ini dimaksudkan untuk satu hal dan satu hal saja: perayapan situs web dari dalam ke luar, dari atas ke bawah. Alat SEO umumnya dapat dikelompokkan ke dalam tiga kategori utama. Pertama ada penelitian kata kunci ad hoc, yang membantu Anda menemukan halaman pencarian yang paling tepat untuk konten Anda untuk peringkat yang lebih tinggi. Selanjutnya, ada pemantauan posisi yang sedang berlangsung, yang merupakan cara Anda melacak posisi pencarian Anda untuk mengidentifikasi di mana Anda mendapatkan dan kehilangan tanah. Akhirnya, ada perayapan, di mana bot web mem-parsing satu situs web atau secara sistematis merayapi dan mengindeks seluruh internet. DeepCrawl tidak melakukan penjelajahan di seluruh internet, tetapi itu akan memberikan situs web Anda tentang komprehensif "pemindaian seluruh tubuh" SEO yang Anda bisa dapatkan.

Perayapan situs dalam semacam ini bermanfaat untuk bisnis dalam beberapa cara. DeepCrawl adalah alat untuk pengguna pemula yang ingin menyoroti masalah situs atau pengguna tingkat lanjut yang menyesuaikan perayapan mereka, tetapi tanpa batasan pada akses data. Perayapan juga membuat pemantauan kesehatan situs lebih mudah dengan konteks waktu nyata dan historis, memberikan bisnis kemampuan untuk membandingkan perayapan dari tahun ke tahun dan menelusuri berbagai tren dan jenis laporan. Anda biasanya perlu menggunakan kombinasi beberapa alat di tiga kategori SEO untuk strategi yang paling efektif, dan crawler situs adalah cara Anda mengidentifikasi kekuatan dan kelemahan situs web dan halaman arahan Anda sendiri.

Pilihan SEO untuk Editor, Moz Pro, SpyFu, dan AWR Cloud memiliki kedalaman pemantauan kata kunci dan posisi yang jauh lebih besar, tetapi hampir tidak memiliki kemampuan merangkak dan audit situs. Jadi, misalnya, jika Anda menggunakan salah satu alat Pilihan Editor atau produk spesifik kata kunci seperti KWFinder.com untuk mengidentifikasi halaman hasil mesin pencari target (SERP) dan tempat yang ideal untuk konten Anda untuk peringkat, Anda kemudian akan menjalankan pemindaian DeepCrawl dari arsitektur situs Anda untuk menghasilkan pengelompokan halaman dan mengidentifikasi masalah SEO spesifik yang perlu ditingkatkan dan diselesaikan oleh situs Anda untuk membuat peringkat halaman tersebut. Hal yang sama berlaku untuk mencari tahu mengapa konten Anda kehilangan peringkat dalam pencarian seperti yang dilacak dalam alat pemantauan seperti AWR Cloud atau melakukan beberapa analisis akar penyebab mengapa situs Anda dipukul dengan penalti pencarian Google dan bagaimana Anda dapat memulihkan. Cepat atau lambat, strategi SEO selalu kembali untuk mengaudit situs Anda sendiri. Itu satu-satunya pekerjaan DeepCrawl.

Harga dan Paket

Seperti yang dinyatakan, DeepCrawl mulai dari $ 81, 50 per bulan, ditagih setiap tahun ($ 89 bulan-ke-bulan) untuk paket Pemula, yang dilengkapi dengan 100.000 URL aktif, lima proyek aktif, ditambah akses antarmuka pemrograman aplikasi (API) lengkap. Sebagian besar alat SEO mencadangkan akses API untuk tingkatan perusahaan, yang merupakan nilai tambah pasti bagi pengguna DeepCrawl yang menginginkan penyesuaian lebih dalam tanpa label harga perusahaan.

Perubahan lain yang terjadi sejak kami terakhir meninjau alat adalah bahwa perusahaan telah menyelesaikan rencana penetapan harga lainnya. Bagi mereka yang ingin mendaftar online untuk layanan ini, ada rencana awal dan hanya itu. Fitur yang lebih canggih dan opsi layanan yang meningkat sekarang semuanya tersedia hanya dalam satu jenis paket lainnya: Paket Corporate. Tidak ada banyak detail di sini, selain dari harga "Bespoke", yang kami anggap berarti panggilan ke perwakilan perusahaan sehingga mereka dapat menyesuaikan layanan dan rencana harga sesuai kebutuhan Anda.

Perayapan Situs Web

Proses perayapan situs di DeepCrawl dimulai dengan penyiapan empat langkah cepat. Dalam satu perayapan apa pun, Anda dapat memasukkan hingga lima sumber, peta situs, situs web, analisis, backlink, dan daftar URL. Idenya adalah untuk memudahkan mengidentifikasi celah dalam arsitektur situs Anda, dengan metrik spesifik yang tidak akan Anda temukan di alat perayapan lainnya seperti Halaman Lalu Lintas Pengemudi yang Yatim. DeepCrawl dirancang untuk memberi pengguna gambaran lengkap tentang kesehatan teknis situs web mereka, dengan data dan wawasan yang dapat ditindaklanjuti untuk meningkatkan visibilitas SEO dan mengubah lalu lintas organik menjadi pendapatan.

Saat Anda mendaftar untuk uji coba DeepCrawl gratis, antarmuka pertama akan membawa Anda ke dasbor proyek. Untuk mengatur proyek Tes PCMag saya, saya memasukkan PCMag.com sebagai domain utama. Langkah kedua adalah memilih sumber data untuk perayapan, yang mencakup situs web itu sendiri, peta situs PCMag, dan analitik yang dapat Anda akses dengan akun Google Analytics yang aktif. Anda juga dapat menambahkan parameter backlink dan target URL di dalam domain (misalnya, jika Anda telah mengidentifikasi halaman target dalam alat riset kata kunci) dengan mengunggah file CSV dari backlink atau daftar URL tertentu. Ada juga kotak pop-up di bagian bawah halaman untuk menonton tutorial video tentang cara mengatur proyek dan perayapan DeepCrawl.

Langkah tiga memungkinkan Anda mengatur parameter untuk perayapan itu sendiri. Saya dapat beralih kecepatan merangkak ke mana saja dari satu URL ke 50 URL per detik. Dari sana, saya memiliki opsi untuk menetapkan berapa banyak "tingkat perayapan" dalam pemindaian harus pergi dari beranda PCMag, dan mengatur jumlah maksimum URL di mana perayapan harus berhenti. Uji coba gratis saya adalah untuk rencana Pemula, jadi URL saya dibatasi 100.000. Langkah terakhir adalah mengatur apakah ini akan menjadi satu kali atau perayapan berulang, yang bisa per jam, harian, mingguan, dua mingguan, bulanan, atau triwulanan, dengan opsi untuk mengatur waktu mulai dan akhir untuk perayapan.

Ini adalah fitur penting untuk ditetapkan jika Anda memerlukan audit situs biasa tetapi hati-hati dengan batas URL Anda tergantung pada paket yang Anda pilih. Ada juga pengaturan yang lebih maju untuk pembatasan perayapan yang lebih dalam, URL yang dikecualikan, penulisan ulang URL, dan panggilan balik API, tetapi pengguna SEO non-teknis tidak perlu masuk ke situ. Dari sana, saya mengklik Mulai Perayapan, dan menerima email beberapa menit kemudian ketika perayapan selesai.

Di dashboard merangkak yang lengkap, Anda langsung dihadapkan dengan dinding informasi. Jika Anda tahu apa yang Anda cari, maka ada dua bilah pencarian di bagian atas untuk menemukan URL tertentu atau menemukan laporan pada area tertentu dari arsitektur situs; ini bisa berupa apa saja dari konten tubuh dan tag sosial ke URL gagal dan pengalihan situs web. Secara keseluruhan, DeepCrawl menjalankan 175 laporan di URL saya - yang dalam uji coba gratis ternyata dibatasi pada sedikit lebih dari 10.000 - dan menemukan 30 masalah situs dan merangkak enam "level" atau tautan yang dalam dari beranda.

Halaman dasbor utama menyediakan pengelompokan daftar semua masalah situs saat ini, dari mana Anda dapat menelusuri ke URL tertentu di mana DeepCrawl akan menyoroti kesalahan halaman seperti konten duplikat, halaman rusak, tautan berlebih, atau halaman dengan judul, deskripsi, dan metadata yang membutuhkan peningkatan SEO. Di sebelah daftar itu, saya menemukan perincian halaman diagram pie interaktif dari masalah yang paling umum di antara 10.000+ halaman yang dirayapi.

DeepCrawl juga telah memperbarui antarmuka penggunanya (UI) sejak tinjauan awal kami, menambahkan remah roti di setiap halaman untuk membuatnya lebih mudah untuk menavigasi ke bagian lain dari platform dan menambahkan bagian dasbor untuk menilai semua perayapan yang berjalan di satu tempat. Untuk domain saya, saya menemukan bahwa, sementara tidak ada masalah besar dengan 49 persen halaman saya (kebanyakan dari mereka halaman "primer"), 30 persen halaman saya di bawah permukaan berurusan dengan kesalahan server 5xx, lima persen halaman memiliki URL gagal, dan 16 persen halaman "tidak dapat diindeks." Menurut DeepCrawl, kesalahan 5xx kemungkinan terjadi karena situs PCMag memblokir aspek perayapan atau karena perayapan terlalu cepat untuk ditangani oleh server. DeepCrawl juga telah mengklarifikasi bahwa halaman yang ditandai sebagai utama tidak harus bebas masalah, dan masih dapat ditinjau untuk memasukkan halaman yang hilang, mengecualikan halaman bernilai rendah, dan dijelaskan dengan rekomendasi SEO pada halaman.

Beberapa alat perayapan lain yang saya uji, termasuk Ahrefs dan Majestic, juga memberi Anda gangguan seperti ini, termasuk masalah situs dasar serta pengindeksan backlink, yang berarti hyperlink masuk dari situs lain ke situs Anda. Apa yang orang lain tidak cukup lakukan adalah menggali lebih dalam ke titik yang DeepCrawl lakukan, terutama dengan gangguan seperti halaman yang diamankan dengan protokol HTTPS yang lebih aman sebagai lawan dari HTTP, sesuatu algoritma Google memperhitungkan ketika peringkat halaman.

DeepCrawl juga memberi Anda Pengelompokan Halaman yang cerdas (yang dapat Anda temukan di Pengaturan Lanjut saat menyiapkan perayapan), artinya pengambilan sampel Anda didasarkan pada persentase halaman dan bukan angka. Mengelompokkan halaman dengan cara ini penting karena memberikan sampel yang konsisten di seluruh perayapan. Anggap saja seperti percobaan ilmiah: jika Anda adalah situs web e-commerce merayapi 20 persen dari halaman produk Anda, dalam perayapan berikut, Deepcrawl akan memindai 20 persen yang sama untuk halaman yang telah ditambahkan, dihapus, hilang atau diubah dalam setiap laporan. Ini juga mengurangi waktu dan biaya perayapan, karena Anda menargetkan perayapan Anda ke subset halaman tertentu yang Anda minati.

Demikian pula, Ekstraksi Khusus DeepCrawl dapat digunakan untuk memasukkan atau mengecualikan parameter yang Anda pilih. Ini adalah fitur yang lebih canggih yang dirancang untuk penjelajahan yang lebih khusus untuk mengasah area fokus Anda. Perusahaan juga telah menambahkan Ekstraksi Kustom Preset untuk pengguna non-teknis, karena menulis ekstraksi kustom memerlukan pengetahuan tentang bahasa ekspresi reguler (Regex).

Pelaporan Lanjut

Selain dari integrasi GSC, peningkatan yang paling menonjol ke DeepCrawl adalah dalam kemampuan pelaporannya, di mana DeepCrawl telah menambahkan 75 laporan baru pada tahun lalu. Di luar dasar-dasar - ​​berbagi dan mengekspor laporan, atau menambahkan tugas untuk laporan itu - Anda dapat mengklik tombol Bagikan untuk mendapatkan tautan yang dapat dibagikan ke laporan itu. Anda kemudian dapat mengirim laporan melalui email ke sejumlah penerima. Anda juga dapat mengunduh laporan sebagai file CSV atau peta situs XML, dan menyesuaikan laporan dengan merek kustom.

Fitur berbasis tugas sangat berguna. DeepCrawl memungkinkan saya untuk menambahkan tugas untuk laporan spesifik - dalam hal ini, daftar kesalahan server 5xx - untuk mengambil tindakan terhadap kerentanan SEO tersebut. DeepCrawl memungkinkan Anda untuk tidak hanya menjadwalkan dan menyesuaikan penjelajahan, tetapi menggunakan Task Manager Anda dapat melacak kemajuan dan mengelola alur kerja masalah dan tenggat waktu. Tanda alat yang baik adalah yang tidak hanya menemukan masalah atau peluang tetapi juga membantu Anda untuk bertindak atas dengan rekomendasi yang ditargetkan. Saya diberi pilihan untuk mengatur tugas terbuka atau tetap; menetapkan prioritas rendah, sedang, tinggi, atau kritis; menetapkan tenggat waktu, dan menetapkan tugas itu untuk individu tertentu di tim saya. DeepCrawl memberi saya jalan nyata untuk menyelesaikan masalah SEO dengan situs saya. Hanya rekomendasi yang ditargetkan dari SpyFu dan KWFinder.com yang memberikan kemampuan yang sama untuk bertindak atas pelaporan SEO, dan tidak ada perayap lain yang menyertakan fitur tindakan berbasis tugas semacam ini.

DeepCrawl telah meningkatkan bilah pencarian navigasi kiri untuk menemukan laporan menggunakan kata kunci juga (bahkan jika kata kunci tidak muncul dalam laporan judul sebenarnya), dan menyaring laporan dengan URL atau metrik tautan yang relevan. Ada juga sejumlah visualisasi data baru pada layar laporan dan kategori termasuk grafik breakdown, grafik terkait, grafik tren baru, dan peningkatan UX seperti pengguliran dan toggling grafik, serta penjelasan interaktif tentang metrik tertentu yang muncul dalam grafik yang diberikan. UI dasbor laporan juga fleksibel, artinya Anda dapat menyeret-dan-jatuhkan laporan yang ingin ditampilkan.

Mengklik URL apa pun dalam laporan apa pun memberi Anda metrik terperinci per halaman. Dalam semua laporan URL-per-URL-nya, DeepCrawl menggunakan metrik khusus yang disebut DeepRank, yang mengukur "bobot internal" dari tautan yang dihitung mirip dengan algoritma PageRank Google. Ini adalah metrik otoritas URL DeepCrawl, pada skala 0-10, menunjukkan URL Anda yang paling penting atau yang paling membutuhkan perbaikan. Jadi, sementara halaman beranda PCMag dan halaman teratas semuanya diperingkat dalam kisaran 8-10, beberapa halaman yang sarat masalah ditinggalkan dengan DeepRank mendekati nol.

Selain menyinkronkan dengan Google Analytics, DeepCrawl juga mencakup bagian data yang memecah halaman desktop dan seluler tidak hanya untuk desain web responsif, tetapi semua konfigurasi seluler termasuk halaman seluler dan desktop yang terpisah, halaman dinamis, dan halaman AMP. Jenis kerusakan seluler utama ini juga dapat ditemukan di SpyFu dan SEMrush, tetapi tidak dengan kedalaman metrik DeepCrawl dan tidak pada alat perayap dan pelacakan tautan balik lainnya yang saya uji, termasuk LinkResearchTools.

Pembaruan kemampuan terbesar untuk DeepCrawl sejak tinjauan awal kami adalah integrasi dengan Google Search Console (GSC), dan bahkan pengalaman pengguna halaman-per-halaman (UX) yang lebih maju dan metrik kinerja situs. Integrasi ini memungkinkan Anda untuk menghubungkan wawasan kinerja situs DeepCrawl yang ada dengan informasi pencarian organik dari laporan Search Analytics GSC. Dengan menambahkan properti Search Console Anda sebagai sumber URL dalam pengaturan crawl Anda, DeepCrawl sekarang dapat memberikan impresi, klik, rasio klik-tayang (RKT), dan metrik posisi rata-rata untuk setiap halaman yang diindeks yang muncul di hasil pencarian. Laporan Google Search Analytics datang dengan batas 1.000 URL di antarmuka GSC, tetapi mengakses laporan melalui DeepCrawl membuat Anda dapat mengatasinya.

Alat SEO lain seperti SEMrush dan Majestic juga berintegrasi dengan Google Search Console, tetapi integrasi DeepCrawl adalah satu-satunya di antara alat yang telah kami uji menggunakan ini untuk memberikan metrik SERP khusus perangkat. Melalui integrasi, DeepCrawl telah merilis 10 laporan baru, dua grafik baru, dan perbandingan desktop / mobile / tablet yang lebih dalam. Rincian dan perbandingan perangkat sekarang menarik data GSC berdasarkan negara-per-negara, tayangan pencarian, dan efektivitas untuk halaman yang dapat diindeks dan tidak dapat diindeks, merayapi halaman yang mendapatkan lalu lintas dari pencarian gambar, dan metrik pada halaman Google AMP.

Salah satu fitur unik di sini adalah ukuran halaman seluler / AMP yang menerima lalu lintas desktop dan sebaliknya, artinya DeepCrawl akan ditampilkan jika halaman Anda diberi peringkat pada perangkat yang salah. Ini berarti DeepCrawl merayapi semua URL AMP atau seluler yang terpisah untuk menyoroti perbedaan dan ketidaksesuaian antara konten desktop dan seluler. Laporan memeriksa bahwa semua halaman bernilai tinggi ada di ponsel.

DeepCrawl juga menyediakan data tentang penandaan sosial, seperti halaman dengan Kartu Twitter yang valid, serta tab yang hanya menampilkan kinerja halaman dalam hal waktu buka atau waktu yang dibutuhkan untuk "mengambil" halaman. Terakhir, alat ini menyediakan laporan migrasi situs web untuk menganalisis situs web langsung dan pementasan selama migrasi dan melaporkan secara khusus pada halaman HTTP dan HTTPs. Ini adalah metrik yang akan Anda temukan di alat pemantauan situs web, tetapi dalam hal SEO, ini bisa berharga hanya dalam mengidentifikasi halaman di mana UX buruk dan memastikan migrasi situs web yang lancar.

Di bawah Situs Crawling Microscope

DeepCrawl adalah alat perayapan terbaik yang kami uji dengan margin lebar. Ini memberikan kedalaman terbesar pemindaian domain dan pelaporan SEO dengan data dan metrik yang sangat terperinci yang, bagi pemula SEO, dapat benar-benar luar biasa. Sebagian besar pemetaan arsitektur situs dan analisis domain yang disediakannya bisa dibilang lebih cocok untuk pengembang dan TI. PCMag tidak meninjau fitur beta, tetapi DeepCrawl juga menguji Mode Penjelajah Situs eksperimental yang memungkinkan Anda menjelajahi arsitektur situs secara visual.

Seperti halnya dominasi KWFinder.com dalam riset kata kunci ad hoc, fokus laser DeepCrawl pada perayapan adalah berkah sekaligus kutukannya. Cakupan fungsionalitasnya yang sempit ini menghalangi DeepCrawl dari mendapatkan anggukan Pilihan Editor bersama dengan platform SEO yang lebih lengkap Moz Pro dan SpyFu. Tetapi dalam hal kemampuan merangkak mandiri untuk memindai situs web Anda atau situs pesaing Anda dari atas ke bawah, DeepCrawl adalah mikroskop SEO berdaya tinggi.