Google Search برای نمایش داده های عمومی عالی کار می کند ، اما ده ها گزینه تخصصی وجود دارد که کارهایی را انجام می دهند که Google نمی تواند – یا این کار را انجام نمی دهد. این پنج ابزار از طریق وب سایت های بایگانی شده ، مخازن کد اسکن ، پیدا کردن دستگاه های در معرض و نتایج کل بدون ردیابی شما جستجو می کنند.
Google Search برای نمایش داده های عمومی عالی کار می کند ، اما ده ها گزینه تخصصی وجود دارد که کارهایی را انجام می دهند که Google نمی تواند – یا این کار را انجام نمی دهد. این پنج ابزار از طریق وب سایت های بایگانی شده ، مخازن کد اسکن ، پیدا کردن دستگاه های در معرض و نتایج کل بدون ردیابی شما جستجو می کنند.
5
خرمن
Shodan اغلب به عنوان “Google for Computer” توصیف می شود. به جای خزیدن وب سایت ها ، دستگاه های متصل به اینترنت ، از تلویزیون های هوشمند گرفته تا سیستم های صنعتی را ترسیم می کند و جزئیات را فهرست بندی می کند.
به عنوان مثال ، وب کم را در نوار جستجو تایپ کنید ، و دوربین های در معرض وب را در وب نشان می دهد. اکنون رمزعبور پیش فرض را جستجو کنید و روترها و پایگاه داده ها را مشاهده خواهید کرد که هنوز از ورود به سیستم مانند Admin/Admin استفاده می کنند. Shodan به شما اجازه ورود به سیستم را نمی دهد ، اما روشن می کند که چند دستگاه فقط ناامن مانده اند زیرا هیچ کس پیش فرض را تغییر داده است.
من به شما پیشنهاد نمی کنم که به این دستگاه ها دسترسی پیدا کنید (این غیرقانونی است) ، اما دانستن اینکه آنها وجود دارند ، نحوه فکر شما در مورد امنیت اینترنت را تغییر می دهد. شما می توانید از Shodan برای حسابرسی شبکه های خود ، یافتن سرورهای فراموش شده یا پایگاه داده های غلط تنظیم شده قبل از مهاجمان استفاده کنید. شما می توانید بر اساس کشور ، شماره پورت ، سیستم عامل یا نسخه های خاص محصول جستجو کنید.
من از آن استفاده می کنم تا بررسی کنم که آیا هر یک از دستگاه های خانه هوشمند من بیشتر از آنچه که باید پخش می شود یا خیر. درک آنچه در مورد دستگاه های شخصی شما قابل مشاهده است ، به شما کمک می کند تا قبل از اینکه شخص دیگری آنها را پیدا کند ، سوراخ های امنیتی را لکه دار کنید. ردیف رایگان در هر جستجو 50 نتیجه به شما می دهد ، که برای اکتشافات بسیار زیاد است ، در حالی که برنامه های حق بیمه با 69 دلار در ماه شروع می شود.
4
Archive.org Wayback Machine
شاید بدانید که دستگاه Wayback به شما امکان می دهد نسخه های قدیمی هر وب سایت را مشاهده کنید. اما آنچه شما احتمالاً نمی دانید جستجوی پیشرفته آن به شما امکان می دهد بر اساس نوع پرونده ، الگوهای URL یا محتوای خاص در میلیون ها صفحه بایگانی شده فیلتر کنید – از جمله شرکت هایی که سالها پیش حذف شده اند ، فکر می کنند که آنها برای همیشه از بین رفته اند.
من از آن برای بازیابی پست های حذف شده Reddit و صفحات وب و ردیابی تغییرات در URL های خاص استفاده کرده ام. هنگام شکار شغل ، می توانید بررسی کنید که آیا پست های قبلی در همان URL شامل محدوده حقوق و دستمزد است که شرکت ها از لیست های جدیدتر حذف شده اند ، که می تواند در طول مذاکرات فوق العاده مفید باشد.
این یک ابزار کوچک سرگرم کننده است اگر می خواهید به زمانی که وب هنوز ریشه های خود را می گرفت ، به آن برگردید. با این حال ، این همچنین در خدمت اهداف جدی است. روزنامه نگاران از آن برای ضبط عکس های صفحه ای از صفحات وب که گمان می کنند بعداً ویرایش یا حذف شوند ، استفاده می کنند و تیم های حقوقی برای تهیه شواهدی از شرکت های ادعا که بعداً سعی در انکار داشتند ، به صفحات بایگانی شده تکیه می کنند.
3
Publicwww
اگر می خواهید بدانید که یک وب سایت محبوب چگونه ساخته شده است و از چه فناوری هایی استفاده می کند ، می توانید ابزارهای توسعه دهنده را آتش بزنید و کد منبع را به صورت دستی بازرسی کنید. یا می توانید از PublicWWW برای جستجوی 477 میلیون صفحه وب به طور همزمان استفاده کنید. این صفحات مانند HTML ، JavaScript و CSS را نشان می دهد که می توانید از آنها برای یافتن سایت ها با استفاده از همان دروازه پرداخت ، ابزار تحلیلی یا نسخه چارچوب استفاده کنید.
Publicwww برای تحقیق نیز عالی است. می توانید از آن برای یافتن وب سایت های متعلق به همان شرکت با استفاده از شناسه Google Analytics استفاده کنید. با این حال ، این برنامه عمدتاً توسط تیم ها برای ردیابی پشته های فناوری رقبا ، مانند ابزارهای پرداخت یا ابزارک گپ استفاده می شود.
محدودیت این است که فقط صفحات خانگی را فهرست می کند ، اما معمولاً کافی است. بیشتر سایت ها اطلاعات را در کد منبع خود ، از جمله ردیابی شناسه ، بلوک های اظهار نظر و نسخه های چارچوب ، نشت می کنند. بنابراین ، هر آنچه شما باید در مورد فناوری یک سایت بدانید معمولاً درست در صفحه اول است.
2
grep.app
Grep.App (که اکنون متعلق به Vercel است) یک ابزار جستجوی کد رایگان است که به شما امکان می دهد فوراً از طریق هر مخزن عمومی GitHub جستجو کنید. بر خلاف جستجوی داخلی GitHub ، از عبارات منظم پشتیبانی می کند ، بنابراین می توانید به جای متن ساده ، به دنبال الگوهای پیچیده در زبان های مختلف برنامه نویسی باشید. حتی می توانید با میانبر مانند grep.app/owner/repo مستقیماً به یک پروژه خاص پرش کنید.
این یک روش مفید برای یافتن نمونه های کد واقعی است. هنگامی که با یک مسئله روبرو می شوید ، در پیام خطا چسبانده و ببینید که چگونه سایر توسعه دهندگان آن را حل کرده اند ، یا در صورت نیاز به الهام سریع ، الگوهای اعتبار سنجی و امضاهای عملکرد را جستجو می کنند. Grep.App بسیار سریع ، آسان برای استفاده و یک منبع عالی وقتی می خواهید پاسخ مستقیم از کد واقعی داشته باشید.
1
سورکسن
Searxng یک جمع کننده موتور جستجوگر با محوریت حریم خصوصی است که از بیش از 230 منبع در حالی که هرگونه ردیاب ، کوکی و تلاش اثر انگشت را از بین می برد ، نشان می دهد.
حریم خصوصی آشکار است ، اما کشش واقعی تجمع است. موتورهای جستجوی مختلف در موارد دیگر برتری دارند. Searxng همه آنها را با هم ترکیب می کند ، نسخه های تکراری و رتبه بندی را با توجه به منابع از بین می برد. این پشتیبانی از تمام اپراتورهای پیشرفته ای که از Google می شناسید ، مانند سایت: و FileType: ، و همچنین برخی از شما ، مانند تصاویر! ،! اخبار ،! همچنین می تواند مقالات آکادمیک ، اخبار مربوط به تاریخ های خاص و تصاویر بدون علامت های پایگاه داده های تخصصی را پیدا کند که Google خزنده نخواهد شد.
!images
!news
!papers
Searxng تنها راه فراتر از گوگل نیست – موتورهای جستجو برای کاوش در وب عمیق و نامرئی وجود دارد که راه های بیشتری برای حفر عمیق تر ارائه می دهند.
برای اکثر مردم ، ساده ترین راه برای امتحان کردن Searxng از طریق نمونه عمومی مانند Searx.be است ، اما در صورت تمایل می توانید خود میزبانی کنید. در حالی که به دلیل پرس و جو از منابع مختلف می تواند کمی کندتر از جستجوهای مستقیم باشد ، شما برای نتایج جستجوی با کیفیت و حفظ حریم خصوصی سرعت تجارت می کنید.
این ابزارها در شکاف بین Google و Dark Web – Legal ، Public و بر روی فهرست های تخصصی خود ساخته شده اند. از آنها با مسئولیت پذیری استفاده کنید ، و متوجه خواهید شد که چه مقدار از اینترنت فراتر از یک جعبه جستجوی ساده قرار دارد.