Phenquestions
Почему командная строка?
Правда немного другая; большая часть информации на веб-странице, даже на YouTube, основана на тексте. Вы можете использовать это для поиска и фильтрации данных в соответствии с вашими потребностями. Вдобавок ко всему, если вы хотите избежать отслеживания, было бы неплохо рассмотреть возможность чтения многих веб-страниц в автономном режиме. Еще одна причина - сбор информации для парсинга проектов. Очистка веб-страницы означает поиск необходимой информации с помощью программного обеспечения, обычно машинного обучения, чтобы сделать вывод. Если вам нужна помощь в решении проблемы программирования, эти сайты созданы для работы с текстовыми браузерами, поэтому, если они вам нужны, вы можете оставаться в командной строке.
Браузеры
Самым старым браузером для командной строки, который все еще поддерживается, является Lynx. У него много отличных функций, но нет JavaScript. Хотя вы можете использовать StackExchange, сайт лучше работает с Javascript. Вход с использованием учетной записи Google или Facebook на момент написания не работал. В браузере есть небольшая информационная панель внизу экрана и нет меню. Links2 имеет раскрывающееся меню вверху, которое можно вызвать, нажав клавишу выхода. В остальном большинство операций работает так же, как Lynx; большая разница в том, что Links также работает в графическом режиме. В большинстве систем вы должны вызывать его из списка приложений, чтобы перейти в графический режим. Запуск браузера такой же в графическом режиме.
elinks - это усовершенствованная версия двух предыдущих браузеров. Этот браузер привлекателен и может даже поддерживать изображения через внешние средства просмотра. Эта программа просмотра отлично подходит для обычного просмотра и хранит гораздо больше вещей, чем другие. Во-первых, вы можете запустить JavaScript с помощью некоторой настройки. Не выходит из коробки.
Дизайнеры, создавшие W3M, сделали это, имея в виду больше, чем просмотр веб-страниц. Браузер w3m также является пейджером, что позволяет просматривать с его помощью такие вещи, как изображения. Вы можете использовать его как инструмент форматирования текста для набора ваших html-страниц. Он поставляется с программой просмотра изображений, которая может просматривать изображения многих форматов. Многие другие программы используют это для отображения изображений внутри своих терминальных программ.
У W3m есть двоюродный брат в emacs-w3m. Это отличное программное обеспечение просматривает веб-страницы внутри emacs; кто бы ни ушел? Он использует w3m для рендеринга страниц. Поскольку это emacs, установка выполняется как обычно; поместите требуемый оператор в свою конфигурацию. Однако для этого также требуется установленный двоичный файл w3m.
Скачать инструменты
Помимо просмотра в терминале, вы можете загружать файлы и обрабатывать их отдельно. Это может быть очень полезно для ускорения загрузки, и во многих случаях вы можете обойти геоблокировку. Если вы ищете медиафайл, вы можете загрузить код и выполнить поиск с помощью grep, tail и cousins.
Первый инструмент, о котором вам следует знать, - это wget2, второй! Этот инструмент может загружать файл, но он также может загружать несколько файлов. Самая ценная часть команды - то, что она может зеркалировать веб-сайт. При этом вы также можете установить уровень перехода по ссылкам с сайта. Эти загрузки могут занять много времени, поэтому у вас есть возможность запускать их в фоновом режиме. Если у вас есть проблемы с пропускной способностью, вы также можете ограничить пропускную способность, которую вы используете. Если у вас отличная пропускная способность, посмотрите на puf, который может загружать файлы параллельно.
Вы можете использовать cURL для загрузки файлов, но большая разница с wget в том, что cURL открывает сайт с кодом. Если вы запустите его на произвольном сайте без параметров, вы увидите HTML-код. Некоторые области воспользовались этим; если вы их откроете, вы получите конечный результат. Отличный пример - wttr.in, если добавить ваше местоположение в качестве каталога (curl wttr.в / Стокгольм). Эта команда также имеет множество расширений для программных языков, таких как Python, Rust, PHP и многих других.
Если у вас есть собственный сервер и вам нужно передать файлы, используйте sftp. Это безопасно и должно быть единственным способом перемещения ваших файлов между системами. Клиент является частью ssh, защищенной системы оболочки. Вы используете ssh для входа на свои удаленные серверы.
Заключение
Что бы вы ни делали, подумайте, единственный ли способ выйти в Интернет - это использовать графический браузер. Большинство сайтов будут выглядеть странно в командной строке, но обычно вы можете получить нужную информацию. Некоторые могут даже отображать графику в командной строке. Все они гораздо менее требовательны к ресурсам, чем устаревшие браузеры, к которым вы привыкли. Инструменты для обработки файлов через Интернет становятся мощными после изучения использования и функций. Вы также можете использовать их для своих программных проектов, особенно cURL с библиотекой и множеством подключений к языкам программирования.
