Как убрать client network stats
Encrypted Client Hello в Firefox: как включить и почему не работает
После январского апдейта до версии 85.0 браузер Firefox технологию защиты от перехватов ESNI (Encrypted Server Name Indication) официально больше не поддерживает. Вместо неё теперь — ECH или Encrypted Client Hello.
Как отмечает сам разработчик, новое TLS-расширение ECH изначально разрабатывалось с учетом всех выявленных недостатков ESNI.
В частности, говорится в публикации Mozilla Security Blog, «ESNI не обеспечивает полную защиту данных и имеет проблемы со взаимодействием и развертыванием, которые не позволяют использовать эту технологию более широко«.
В этой связи и было принято решение отказаться от поддержки ESNI в Firefox 85 в пользу ECH.
как включить поддержку ECH в браузере Firefox
Делается это стандартно, через включение соответствующей опции в разделе экспериментальных настроек браузера. А именно:
Но есть проблема: Encrypted Client Hello без своего сервера не работает
Тест Cloudflare показывает, в настоящее время браузер Server Name Indication не шифрует, даже если функция шифрования включена. Дело в том, что Cloudflare, как провайдер данного сервиса, эту технологию сам еще не включил.
Следовательно, с точки зрения конечного пользователя Firefox, ситуация получается не совсем правильная. Firefox после 85-й версии ESNI уже не поддерживает, а Encrypted Client Hello хоть и поддерживает, но по факту чисто формально. О чем юзеры сейчас активно пишут службе поддержки браузера.
На что саппорт Mozilla пока только рекомендует пользователям временно перейти на Firefox ESR, в котором поддержка ESNI еще не отключена. И вот пока так, что называется, до выяснения…
Ситуация и вправду странная: понятно, что в Mozilla поспешили, а в Cloudflare пока не торопятся. И, к слову, по некоторым данным, в Cloudflare считают, что спецификация ECH ещё не достигла должной «степени готовности», но работы ведутся…
Напомним, компания Cloudflare является крупнейшим и провайдером онлайн-доступа, который поддерживает ESNI, и пока единственным, который обеспечивает глобальную её поддержку.
Как эффективно использовать Network в Chrome DevTools
Недавно я уже рассказывала о наборе инструментов DevTools, встроенных в Google Chrome. И о их полезных фишках, которые не на поверхности. Таких довольно много, поэтому продолжу. Расскажу об эффективном использовании вкладки Network в меню инструмента. Для SEO-специалистов и не только.
Как запустить Network в DevTools
Напомню, есть несколько способов открыть DevTools:
Вкладка Network помогает выяснить, сколько времени заняла загрузка страницы, какие ресурсы подключились или не подключились к странице, какие ошибки есть в коде.
При первом открытии она может оказаться пустой — тогда просто перезагрузите страницу.
Каждая строка в журнале Network — это ресурс. Все они перечислены в хронологическом порядке (по умолчанию). Верхний обычно является основным HTML-документом. Нижний — то, что было запрошено последним.
Каждый столбец — информация о ресурсе. Основные данные по умолчанию:
Наведите курсор на диаграмму, чтобы увидеть этапы загрузки.
Функционал вкладки Network
Работать в Network удобно, если хорошо знать ее возможности.
1. Столбцы сетевого журнала можно настраивать. Есть много дополнительных столбцов с полезной информацией, а неиспользуемые вы можете скрыть.
Для настройки кликните правой кнопкой мыши на заголовок таблицы сетевого журнала и выберите дополнительный столбец или отключите ненужный.
2. Можете фильтровать данные в журнале с помощью панели инструментов Filter.
Инструмент Filter поддерживает множество различных типов фильтрации. Можно использовать не только отдельные слова, но и регулярные выражения и свойства.
3. Кроме того, вы можете фильтровать данные по типу ресурса, используя на панели нужный функционал отбора.
4. Пока открыт DevTools, он будет записывать сетевую активность в журнал. Это не всегда нужно, запись можно отключить, если нажать красный переключатель.
5. Обычно сетевое подключение компьютера быстрее, чем у мобильных устройств пользователей. Меню Throttling позволяет регулировать скорость подключения, чтобы понять, сколько времени нужно для загрузки страницы на мобильном устройстве.
6. При повторных посещениях браузер часто использует некоторые файлы из своего кеша, что ускоряет загрузку. Если же хотите увидеть, как посетитель воспринимает загрузку страницы впервые, включите Disable Cache.
7. Для сохранения данных в журнале необходимо включить Preserv log.
8. Если нажмете на шестеренку, в панели появятся дополнительные функции:
Но чем эти опции полезны именно SEO-специалисту?
Проверка ответа сервера
Можно сделать проверку ответа сервера из панели Chrome DevTools:
Например, нам нужно узнать ответ сервера для страницы:
Таким образом можно быстро проанализировать ответ сервера страницы и ее отдельных элементов. Увидеть, например, «битые» картинки.
Просмотр заголовков HTTP
Изначально ход проверки такой же, как и в случае с ответом сервера.
Но после пятого пункта появится шестой:
Их правильная оптимизация поможет ускорить работу веб-сервера и уменьшить расход краулингового бюджета на ресурсы, которые не нужно повторно скачивать. Функционал консоли позволяет сделать быструю проверку подобных заголовков, не уходя с сайта.
Смена User-Agent
Если вы хотите просматривать свой сайт так же, как это делает Google, переключите пользовательский агент на тот, который использует Google.
Вы можете проанализировать, как определенный браузер видит ваш сайт и выявить проблемы, если они есть.
Определение ресурсов, блокирующих рендеринг
Используйте данные о времени загрузки ресурсов на панели Network, чтобы определить, какие ресурсы JS и CSS загружаются до DOM и потенциально блокируют его. Фильтруя данные по CSS и JS, можно вычислить проблемные ресурсы.
Блокировка скриптами и по стилям загрузки — одна из наиболее распространенных проблем со скоростью страницы. Их поиск и анализ ее улучшит или увеличит.
Проверка времени загрузки страницы и ее отдельных элементов
Когда во вкладке Network подгружается информация по странице, можно узнать данные по скорости загрузки каждого отдельного ресурса на ней и общего времени загрузки всей страницы.
Панель Network чаще всего используют для анализа корректности загрузки и выгрузки ресурсов. Если вы ищете способы повысить производительность загрузки, не начинайте с этой панели. Есть много типов проблем с производительностью, не связанных с сетевой активностью. Начните с панели Perfomance, потому что она дает вам целевые предложения по улучшению вашей страницы.
Выводы
Таким образом, при эффективном использовании панель Network дает немало возможностей для SEO-оптимизации сайта.
Как получить текущее сетевое использование приложения (или в целом), даже на Android N?
Как говорится в названии. Я хочу знать, сколько байтов в секунду используется конкретное приложение в определенное время.
Нужно ли мне также иметь какое-то разрешение?
В настоящее время люди говорят использовать TrafficStats.getUidRxBytes(packageInfo.uid), но отсюда: https://developer.android.com/reference/android/net/TrafficStats.html#getUidRxBytes(int), он говорит, что он не поддерживается с N, и что Вместо этого я должен использовать NetworkStatsManager. Есть ли какой-нибудь пример для его использования?
Может быть, объединенное решение?
EDIT: я попытался использовать NetworkStatsManager на Android N, но мне не удалось. Я не могу найти какой-либо образец того, как его использовать, и все вопросы, связанные с stackOverflow об этом, были схожи в том смысле, что они не могут его хорошо использовать. Пожалуйста, если кто знает, как его использовать, напишите об этом.
ОТВЕТЫ
Ответ 1
Использование NetworkStats не является сложным.
Уровень API-устройства должен быть не менее 23. Ниже приведены некоторые шаги, необходимые для начала использования NetworkStatsManager
Объявите необходимые разрешения в AndroidManifest.xml :
Запросить разрешение в Activity
android.permission.PACKAGE_USAGE_STATS не является нормальным разрешением, поэтому его нельзя просто запросить. Чтобы проверить, предоставлено ли разрешение, отметьте:
Чтобы запросить это разрешение, просто вызовите Intent :
Чтобы получить ссылку, вызовите:
GLOBAL:
Чтобы получить общее использование WiFi:
Получение данных для мобильной сети сложнее. Чтобы получить вызов Bucket :
Применение:
Для получения данных для конкретного приложения прочитайте документацию для queryDetailsForUID.
Чтобы получить использование пакета для WiFi:
Чтобы получить использование пакета для Мобильный:
Сделано образец Github repo, демонстрирующий использование.
Ответ 2
Существует также сложный способ получить статистику, но это должно работать для всех адаптеров: (но это дорого, потому что вы должны постоянно читать файлы),
wlan0 может быть всеми вашими адаптерами, но вам нужно поддерживать значение в своем приложении, потому что если вы выключите/активируете адаптер, значение снова будет 0. (У вас могут быть значения RX и TX)
Это также можно сделать с помощью tcp, tcp6, upd, upd6
Здесь у вас есть столбец «uid», который является UID установленных приложений. (Так что приложение использует сеть прямо сейчас)
Из этого файла вы также можете увидеть конечную точку соединения.
+1. Вы также можете посмотреть этот файл, API TrafficStats использует это:
Итак, возможно, смешав первый ответ с этими знаниями, вы можете получить больше и лучшую статистику.
Мониторинг открытых TCP/IP подключений с помощью PowerShell
Многие администраторы для отображения информации о сетевых подключениях TCP/IP, открытых TCP портах в Windows привыкли использовать консольную утилиту netstat или графическую TCPView. В PowerShell для замены утилиты netstat можно использовать командлет Get-NetTCPConnection, который можно довольно гибко использовать для получения информации об активных сетевых соединениях в Windows, открытых сетевых портах и запушенных процессах, которые используют TCP протокол. Благодаря тому, что PowerShell это объектно-ориентированный язык, вы можете довольно удобно делать сложные скрипты для получения информации и мониторинга открытых портов, процессах и установленных сетевым соединениях.
Попробуйте запустить командлет Get-NetTCPConnection без параметров.
Команда по аналогии с netstat вывела список всех активных подключений с указанием локального и удаленного адреса, порта, состояния подключения (Listen, Established Internet, TimeWait, Bound, CloseWait, SynReceived, SynSent, TimeWait) и идентификатор процесса (PID), которые использует это TCP подключение.
Можно вывести список локальных портов, которые слушаются (открыты) на вашем компьютере:
Можно вывести только внешние (Интернет) подключения:
Для всех сетевых TCP подключений можно вывести DNS имена удаленных хостов и имена процессов.
Данный PowerShell скрипт выполнил разрешение всех IP адресов хостов в DNS имена, и для каждого соединения указал имя процесса, который его использует.
По имени PID родительского процесса можно вывести список связанных имен служб Windows, которые используют сеть:
Можно вывести только сетевые подключения, которые инициированы определенным процессом. Для этого можно использовать такой PowerShell скрипт:
Ареал применения командлета Get-NetTCPConnection очень широкий. Например, вы можете создать простой PowerSHell скрипт, который должен отслеживать установку соединения с определенного IP адреса на указанный локальный порт и выводить всплывающее уведомление администратору.
В следующем примере PowerShell скрипт проверяет, когда появится соединение с указанного IP адреса по порту RDP порту 3389. Если такое подключение появится в списке, он выведет всплывающее уведомление и логирует дату и время подключения в текстовый файл:
Аналогичным образом можно отслеживать и логировать сетевые подключения по любому другому протоколу, например SSH, SMB, FTP, SMTP и т.д. Такой PowerShell скрипт можно оформить в виде службы Windows, которая будет запускаться автоматически.
С помощью PowerShell remoting командлетов (Enter-PSSession и Invoke-Command) вы можете получить список открытых TCP портов и подключений на удаленных компьютерах.
Командлет Get-NetTCPConnection (также как и Test-NetConnection) может быть крайне полезен для мониторинга и диагностики сетевых подключений в Windows.
Interface statistics¶
Overview¶
This document is a guide to Linux network interface statistics.
There are three main sources of interface statistics in Linux:
standard interface statistics based on struct rtnl_link_stats64 ;
protocol-specific statistics; and
driver-defined statistics available via ethtool.
Standard interface statistics¶
There are multiple interfaces to reach the standard statistics. Most commonly used is the ip command from iproute2 :
Protocol-specific statistics¶
Protocol-specific statistics are exposed via relevant interfaces, the same interfaces as are used to configure them.
ethtool¶
Ethtool exposes common low-level statistics. All the standard statistics are expected to be maintained by the device, not the driver (as opposed to driver-defined stats described in the next section which mix software and hardware stats). For devices which contain unmanaged switches (e.g. legacy SR-IOV or multi-host NICs) the events counted may not pertain exclusively to the packets destined to the local host interface. In other words the events may be counted at the network port (MAC/PHY blocks) without separation for different host side (PCIe) devices. Such ambiguity must not be present when internal switch is managed by Linux (so called switchdev mode for NICs).
Standard ethtool statistics can be accessed via the interfaces used for configuration. For example ethtool interface used to configure pause frames can report corresponding hardware counters:
Driver-defined statistics¶
uAPIs¶
procfs¶
The historical /proc/net/dev text interface gives access to the list of interfaces as well as their statistics.
Note that even though this interface is using struct rtnl_link_stats64 internally it combines some of the fields.
sysfs¶
This simple interface is convenient especially in constrained/embedded environments without access to tools. However, it’s inefficient when reading multiple stats as it internally performs a full dump of struct rtnl_link_stats64 and reports only the stat corresponding to the accessed file.
netlink¶
rtnetlink ( NETLINK_ROUTE ) is the preferred method of accessing struct rtnl_link_stats64 stats.
ethtool¶
Ethtool IOCTL interface allows drivers to report implementation specific statistics. Historically it has also been used to report statistics for which other APIs did not exist, like per-device-queue statistics, or standard-based statistics (e.g. RFC 2863).
ethtool-netlink¶
Ethtool netlink is a replacement for the older IOCTL interface.
debugfs¶
struct rtnl_link_stats64В¶
The main device statistics structure.
Definition
Members
Number of good packets received by the interface. For hardware interfaces counts all good packets received from the device by the host, including packets which host had to drop at various stages of processing (even in the driver).
Number of packets successfully transmitted. For hardware interfaces counts packets which host was able to successfully hand over to the device, which does not necessarily mean that packets had been successfully transmitted out of the device, only that device acknowledged it copied them out of host memory.
Number of good received bytes, corresponding to rx_packets.
For IEEE 802.3 devices should count the length of Ethernet Frames excluding the FCS.
Number of good transmitted bytes, corresponding to tx_packets.
For IEEE 802.3 devices should count the length of Ethernet Frames excluding the FCS.
Total number of bad packets received on this network device. This counter must include events counted by rx_length_errors, rx_crc_errors, rx_frame_errors and other errors not otherwise counted.
Total number of transmit problems. This counter must include events counter by tx_aborted_errors, tx_carrier_errors, tx_fifo_errors, tx_heartbeat_errors, tx_window_errors and other errors not otherwise counted.
Number of packets received but not processed, e.g. due to lack of resources or unsupported protocol. For hardware interfaces this counter may include packets discarded due to L2 address filtering but should not include packets dropped by the device due to buffer exhaustion which are counted separately in rx_missed_errors (since procfs folds those two counters together).
Number of packets dropped on their way to transmission, e.g. due to lack of resources.
Multicast packets received. For hardware interfaces this statistic is commonly calculated at the device level (unlike rx_packets) and therefore may include packets which did not reach the host.
For IEEE 802.3 devices this counter may be equivalent to:
Number of collisions during packet transmissions.
For IEEE 802.3 devices this counter should be equivalent to a sum of the following attributes:
Receiver FIFO overflow event counter.
Historically the count of overflow events. Such events may be reported in the receive descriptors or via interrupts, and may not correspond one-to-one with dropped packets.
This statistics was historically used interchangeably with rx_fifo_errors.
This statistic corresponds to hardware events and is not commonly used on software devices.
For IEEE 802.3 devices this counter must be equivalent to:
For IEEE 802.3 devices this counter should be equivalent to:
Receiver FIFO error counter.
Historically the count of overflow events. Those events may be reported in the receive descriptors or via interrupts, and may not correspond one-to-one with dropped packets.
This statistics was used interchangeably with rx_over_errors. Not recommended for use in drivers for high speed interfaces.
This statistic is used on software devices, e.g. to count software packet queue overflow (can) or sequencing errors (GRE).
Counts number of packets dropped by the device due to lack of buffer space. This usually indicates that the host interface is slower than the network interface, or host is not keeping up with the receive packet rate.
This statistic corresponds to hardware events and is not used on software devices.
High speed interfaces may use this counter as a general device discard counter.
For IEEE 802.3 devices this counter must be equivalent to:
For IEEE 802.3 devices possibly equivalent to:
For IEEE 802.3 devices this counter must be equivalent to:
Number of correctly received compressed packets. This counters is only meaningful for interfaces which support packet compression (e.g. CSLIP, PPP).
Number of transmitted compressed packets. This counters is only meaningful for interfaces which support packet compression (e.g. CSLIP, PPP).
Number of packets received on the interface but dropped by the networking stack because the device is not designated to receive packets (e.g. backup link in a bond).
Notes for driver authors¶
Retrieving ethtool statistics is a multi-syscall process, drivers are advised to keep the number of statistics constant to avoid race conditions with user space trying to read them.
Statistics must persist across routine operations like bringing the interface down and up.
Kernel-internal data structures¶
The following structures are internal to the kernel, their members are translated to netlink attributes when dumped. Drivers must not overwrite the statistics they don’t report with 0.