Johan Van

Инструмент для определения технологий на сайтах: Python-Wappalyzer

johanv — Mon, 13 Mar 2023 09:56:28 GMT

Библиотека Python-Wappalyzer - это инструмент для определения технологий, используемых на веб-сайтах. Она использует базу данных Wappalyzer для анализа HTML-кода и других атрибутов веб-страниц для идентификации технологий, используемых на сайте.

Для установки библиотеки можно использовать pip. Например, pip install python-Wappalyzer.

Пример использования библиотеки:

from Wappalyzer import Wappalyzer, WebPage

w = Wappalyzer.latest()
page = WebPage.new_from_url('https://www.example.com')
technologies = w.analyze(page)
for t in technologies:
    print(t.name, t.version)

В этом примере мы создаем экземпляр класса Wappalyzer, загружаем последнюю версию базы данных технологий и анализируем страницу example.com для определения технологий, используемых на сайте. Результаты анализа будут выводиться на экран, показывая название и версию технологий.

Важно отметить, что библиотека Python-Wappalyzer может не всегда работать корректно из-за изменений в HTML-коде или других атрибутах веб-страниц. Также, база данных технологий не всегда может быть актуальной.

Горячие клавиши PyCharm

johanv — Sat, 11 Feb 2023 22:27:04 GMT

gif файл с прыгающим шариком

johanv — Sat, 11 Feb 2023 22:23:35 GMT

Незнаем как вы, а нам захотелось немного магии к новому году.

Вот маленький кусочек кода, который делает gif файл с прыгающим шариком, идею мы дали а дальше все на вашу фантазию)

Скидывайте свои доработки в коменты, оценим)

Отправка строки через сокет (python)

johanv — Tue, 31 Jan 2023 16:11:58 GMT

import socket
from threading import *

serversocket = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
host = "192.168.1.3"
port = 8000
print (host)
print (port)
serversocket.bind((host, port))

class client(Thread):
    def __init__(self, socket, address):
        Thread.__init__(self)
        self.sock = socket
        self.addr = address
        self.start()

    def run(self):
        while 1:
            print('Client sent:', self.sock.recv(1024).decode())
            self.sock.send(b'Oi you sent something to me')

serversocket.listen(5)
print ('server started and listening')
while 1:
    clientsocket, address = serversocket.accept()
    client(clientsocket, address)

Это очень ОЧЕНЬ простая конструкция для того, как вы могли бы решить эту проблему. Прежде всего, вам нужно либо принять клиента (на стороне сервера) перед тем, как перейти в цикл while 1, потому что в каждом цикле вы принимаете нового клиента, либо вы делаете так, как я описал, вы перебрасываете клиента в отдельный поток, который вы обрабатываете самостоятельно с этого момента.

Как проверить url в Python? (искажен или нет)

johanv — Tue, 31 Jan 2023 16:09:36 GMT

Используйте пакет validators:

>>> import validators
>>> validators.url("http://google.com")
True
>>> validators.url("http://google")
ValidationFailure(func=url, args={'value': 'http://google', 'require_tld': True})
>>> if not validators.url("http://google"):
...     print "not valid"
... 
not valid
>>>

sqlite3.ProgrammingError: Incorrect number of bindings supplied. The current statement uses 1, and there are 74 supplied

johanv — Tue, 31 Jan 2023 16:07:49 GMT

Вам нужно передать последовательность, но вы забыли запятую, чтобы ваши параметры были кортежем:

cursor.execute('INSERT INTO images VALUES(?)', (img,))

Без запятой (img) - это просто сгруппированное выражение, а не кортеж, и поэтому строка img рассматривается как входная последовательность. Если длина этой строки составляет 74 символа, то Python воспринимает ее как 74 отдельных значения привязки, каждое длиной в один символ.

>>> len(img)
74
>>> len((img,))
1

Если вам легче читать, вы также можете использовать литерал списка:

cursor.execute('INSERT INTO images VALUES(?)', [img])

Как обнаружить двойной щелчок в QTableView

johanv — Tue, 31 Jan 2023 16:04:33 GMT

Больше нет необходимости использовать СИГНАЛЫ:

self.your_table.doubleClicked.connect(your_function)

"doubleClicked" наследуется от QAbstractItemView.

Как сделать ячейку в QTableWidget только для чтения?

johanv — Tue, 31 Jan 2023 16:01:40 GMT

Для PyQt6 это то же самое, что и у @ozcanyarimdunya, но с перечислением EditTrigger:

self.tableWidget.setEditTriggers(QTableWidget.EditTrigger.NoEditTriggers)

Запуск HTML-кода в браузере (который генерируется BeautifulSoup) прямо из Python

johanv — Tue, 31 Jan 2023 15:58:31 GMT

Альтернатива с использованием NamedTemporaryFile (чтобы файл в конечном итоге был удален ОС):

import tempfile
import webbrowser

html = ' ...  generated html string ...'

with tempfile.NamedTemporaryFile('w', delete=False, suffix='.html') as f:
    url = 'file://' + f.name
    f.write(html)
webbrowser.open(url)

Как уменьшить базу данных sqlite?

johanv — Tue, 31 Jan 2023 15:54:08 GMT

Команда VACUUM перестраивает всю базу данных. Есть несколько причин, по которым приложение может это сделать:

- Если только SQLite не работает в режиме "auto_vacuum=FULL", при удалении большого количества данных из файла базы данных остается пустое пространство, или "свободные" страницы базы данных. Это означает, что файл базы данных может быть больше, чем это необходимо. Выполнение VACUUM для восстановления базы данных позволяет вернуть это пространство и уменьшить размер файла базы данных.
- Частые вставки, обновления и удаления могут привести к фрагментации файла базы данных, когда данные для одной таблицы или индекса разбросаны по всему файлу базы данных. Выполнение VACUUM гарантирует, что каждая таблица и индекс хранятся в файле базы данных в основном смежно. В некоторых случаях VACUUM может также уменьшить количество частично заполненных страниц в базе данных, что еще больше уменьшает размер файла базы данных...

Команда VACUUM работает путем копирования содержимого базы данных во временный файл базы данных, а затем перезаписывает оригинал содержимым временного файла. При перезаписи оригинала используется журнал отката или WAL-файл журнала записи вперед, как и при любой другой транзакции базы данных. Это означает, что при VACUUMing базы данных требуется вдвое больше свободного места на диске, чем размер исходного файла базы данных...

Just open a connection and execute the VACUUM command;

conn = sqlite3.connect(SQLITE_FILE)
conn.execute("VACUUM")
conn.close()

import sqlite3
conn = sqlite3.connect("database.db",isolation_level=None)
conn.execute("VACUUM")
conn.close()