BROADCASTS.com

M\xe1s de lo que nunca quisiste aprender sobre JIT, guardas y especializaci\xf3n https://podcast.jcea.es/python/11\n

En lo que sigue, cuando se habla de CPython, se refiere al\nint\xe9rprete de referencia de Python, que est\xe1 escrito en lenguaje\nC: https://www.python.org/downloads/.

Participantes:

\n
• \n

  Eduardo Castro, email:\n info@ecdesign.es. Conectando desde A\n Guarda.

  \n
\n
• \n

  Jes\xfas Cea, email: jcea@jcea.es, twitter:\n @jcea, https://blog.jcea.es/,\n https://www.jcea.es/. Conectando desde Madrid.

  \n
\n
• \n

  Javier, conectando desde Madrid.

  \n
\n
• \n

  V\xedctor Ram\xedrez, twitter: @virako,\n programador python y amante de vim, conectando desde Huelva.

  \n
\n
• \n

  Miguel S\xe1nchez, email:\n msanchez@uninet.edu, conectando desde\n Canarias.

  \n
\n

Audio editado por Pablo G\xf3mez, twitter:\n@julebek.

La m\xfasica de la entrada y la salida es "Lightning Bugs", de Jason\nShaw. Publicada en https://audionautix.com/ con licencia\n- Creative Commons Attribution 4.0 International\nLicense.

\n
• \n

  [00:52] Aviso de que se est\xe1 grabando. Temas legales.

  \n
\n
• \n

  [01:52] Valor de publicar estos audios y las dificultades para\n hacerlo.

  \n
\n
• \n

  [02:42] M\xe9todos m\xe1gicos:

  \n
  \n
  • __set_name__(). PEP 487:\n https://www.python.org/dev/peps/pep-0487/.
  \n
  \n
\n
• \n

  [04:12] Problemas con PIP 20.3.2:\n https://github.com/pypa/pip/issues/9284.

  \n
\n
• \n

  [05:52] \xbfActualizar a la \xfaltima versi\xf3n o esperar?

  \n
  \n
  • \n

    Poder "echar atr\xe1s" f\xe1cil.

    \n
  \n
  • \n

    Acumular cambios pendientes es deuda t\xe9cnica.

    \n
  \n
  \n
\n
• \n

  [10:42] Google ca\xeddo\n https://www.theguardian.com/technology/2020/dec/14/google-suffers-worldwide-outage-with-gmail-youtube-and-other-services-down.

  \n
\n
• \n

  [11:02] Generaci\xf3n de wheels en varios sistemas:\n https://pythonwheels.com/.

  \n
  \n
  • \n

    auditwheel: https://pypi.org/project/auditwheel/.

    \n
  \n
  • \n

    \xbfGeneraci\xf3n de Wheels en Microsoft Windows?

    \n
  \n
  \n
\n
• \n

  [13:12] Cach\xe9 local de PIP https://pip.pypa.io/en/stable/.

  \n
\n
• \n

  [14:17] Event Sourcing\n https://dev.to/barryosull/event-sourcing-what-it-is-and-why-its-awesome.

  \n
  \n
  • M\xf3dulo eventsourcing:\n https://pypi.org/project/eventsourcing/.
  \n
  \n
\n
• \n

  [14:42] De momento se puede usar el viejo "resolver" de\n dependencias de PIP.

  \n
  \n
  • \n

    Se puede usar la opci\xf3n -use-deprecated=legacy-resolver.

    \n
  \n
  • \n

    Esa opci\xf3n se puede meter tambi\xe9n en el fichero de\n configuraci\xf3n, para no tener que escribirlo en cada\n invocaci\xf3n.

    \n
  \n
  • \n

    Jes\xfas Cea comete el pecado de meter paquetes Python en el\n sistema operativo.

    \n
  \n
  \n
\n
• \n

  [17:02] Batallitas de Jes\xfas Cea.

  \n
  \n
  • \n

    Jes\xfas lleva dos a\xf1os d\xe1ndole vueltas a esto: bpo35930:\n "Raising an exception raised in a "future" instance will\n create reference cycles":\n https://bugs.python.org/issue35930.

    \n

    Explicaci\xf3n detallada del asunto.

    \n
  \n
  • \n

    Brainstorming.

    \n
  \n
  • \n

    [21:22] Visi\xf3n a alto nivel del recolector de basuras de\n Python (cpython)

    \n
    \n
    • \n

      Contador de referencias. Inmediato, pero no recoge\n ciclos.

      \n
    \n
    • \n

      Si se crean instancias y no se destruyen, se llama a un\n recolector "pesado" que tambi\xe9n recoge ciclos.

      \n
      \n
      • \n

        Esto puede ser problem\xe1tico al arrancar el programa,\n antes de que la creaci\xf3n/destrucci\xf3n de objetos se\n "estabilice".

        \n
      \n
      • \n

        gc.disable():\n https://docs.python.org/3/library/gc.html#gc.disable.

        \n
      \n
      \n
    \n
    • \n

      Jes\xfas Cea "abusa" de los destructores y de que se\n ejecuten cuando \xe9l quiere. Lo pr\xe1ctico contra lo puro.

      \n
    \n
    \n
  \n
  • \n

    Jes\xfas ofrece cervezas.

    \n
  \n
  • \n

    gc.collect():\n https://docs.python.org/3/library/gc.html#gc.collect. Esto\n sirve tanto para recoger los ciclos como para comprobar si\n tu programa tiene ciclos de memoria o no.

    \n
  \n
  • \n

    Futures:\n https://docs.python.org/3/library/concurrent.futures.html.

    \n
  \n
  \n
\n
• \n

  [35:29] M\xf3dulo Manhole https://pypi.org/project/manhole/.

  \n
  \n
  • \n

    Explorar un programa en producci\xf3n.

    \n
  \n
  • \n

    Tracemalloc:\n https://docs.python.org/3/library/tracemalloc.html.

    \n
  \n
  • \n

    DTrace: http://dtrace.org/blogs/about/.

    \n
  \n
  • \n

    py-spy: https://pypi.org/project/py-spy/.

    \n
  \n
  • \n

    P\xe9rdidas de memoria: Recordar lo hablado ya en tertulias\n anteriores.

    \n
  \n
  • \n

    jemalloc: http://jemalloc.net/.

    \n
  \n
  • \n

    MALLOC_PERTURB_:\n https://debarshiray.wordpress.com/2016/04/09/malloc_perturb_/.

    \n
  \n
  • \n

    zswap: https://en.wikipedia.org/wiki/Zswap.

    \n
  \n
  \n
\n
• \n

  [42:52] Micropython: https://micropython.org/.

  \n
  \n
  • \n

    ESP8266: https://en.wikipedia.org/wiki/ESP8266.

    \n
  \n
  • \n

    ESP32: https://en.wikipedia.org/wiki/ESP32.

    \n
  \n
  • \n

    Bluetooth Low Energy:\n https://en.wikipedia.org/wiki/Bluetooth_Low_Energy.

    \n
  \n
  • \n

    \xbfQu\xe9 ventajas aporta usar Micropython?

    \n
    \n
    • Velocidad de desarrollo y depuraci\xf3n.
    \n
    \n
  \n
  \n
\n
• \n

  [52:42] \xbfEl futuro ser\xe1 mejor? O no.

  \n
  \n
  • \n

    Desperdicio de recursos materiales porque realmente sobran.

    \n
  \n
  • \n

    Python es mucho m\xe1s lento que C y no digamos ensamblador.

    \n
  \n
  \n
\n
• \n

  [57:17] Cambiar Python por un lenguaje m\xe1s r\xe1pido.

  \n
  \n
  • \n

    Go:\n https://en.wikipedia.org/wiki/Go_(programming_language).

    \n
  \n
  • \n

    Rust:\n https://en.wikipedia.org/wiki/Rust_(programming_language).

    \n
  \n
  • \n

    C++: https://en.wikipedia.org/wiki/C%2B%2B.

    \n
  \n
  \n
\n
• \n

  [01:00:20] Python no pinta nada en m\xf3viles.

  \n
  \n
  • Kivy: https://kivy.org/.
  \n
  \n
\n
• \n

  [01:02:07] Acelerar Python.

  \n
  \n
  • \n

    Subinterpreters: PEP 554:\n https://www.python.org/dev/peps/pep-0554/.

    \n

    Si los subint\xe9rpretes no compartiesen NADA, se podr\xedan\nlanzar simultaneamente en varios n\xfacleos de la CPU sin\ncompetir por un GIL\nhttps://en.wikipedia.org/wiki/Global_interpreter_lock\n\xfanico.

    \n
  \n
  • \n

    JIT:\n https://es.wikipedia.org/wiki/Compilaci%C3%B3n_en_tiempo_de_ejecuci%C3%B3n.

    \n
    \n
    • \n

      PYPY: https://www.pypy.org/.

      \n
      \n
      • RPython:\n https://rpython.readthedocs.io/en/latest/.
      \n
      \n
    \n
    • \n

      Numba: https://numba.pydata.org/.

      \n
    \n
    • \n

      Cython: https://cython.org/.

      \n
    \n
    • \n

      Python es "potencialmente" muy din\xe1mico, pero en la pr\xe1ctica\n los programas no lo son. Jes\xfas pone varios ejemplos.

      \n
      \n
      • \n

        Conversaci\xf3n densa entre Jes\xfas y Javier.

        \n
      \n
      • \n

        Guardas para comprobar que la especializaci\xf3n sigue\n siendo correcta. Por ejemplo, para los diccionarios:\n PEP 509 Add a private version to dict:\n https://www.python.org/dev/peps/pep-0509/

        \n
      \n
      • \n

        "Tipado" m\xe1s estricto.

        \n
        \n
        • \n

          MYPY: http://mypy-lang.org/.

          \n
        \n
        • \n

          Pydantic:\n https://pydantic-docs.helpmanual.io/.

          \n

          Comprobaci\xf3n de tipos en tiempo de ejecuci\xf3n.

          \n
        \n
        \n
      \n
      • \n

        Descubrimiento de tipos en tiempo de ejecuci\xf3n,\n proporcionando "especializaci\xf3n".

        \n
        \n
        • psyco: https://en.wikipedia.org/wiki/Psyco.
        \n
        \n
      \n
      • \n

        Eduardo Castro entra y simplifica la discusi\xf3n.

        \n
      \n
      • \n

        Jes\xfas explica qu\xe9 hace "a+b" internamente.

        \n
      \n
      \n
    \n
    \n
  \n
  \n
\n
• \n

  [01:29:22] PyParallel http://pyparallel.org/

  \n
  \n
  • \n

    Memoria transaccional:\n https://es.wikipedia.org/wiki/Memoria_transaccional.

    \n
  \n
  • \n

    (nota de Jes\xfas Cea): Los sistemas de persistencia Python\n descritos en tertulias anteriores pueden considerarse casos\n de memoria transaccional... si somos flexibles.

    \n
  \n
  • \n

    "Colorear" objetos y que dos hilos no puedan acceder a\n objetos del mismo color simultaneamente o en transacciones\n concurrentes.

    \n
  \n
  \n
\n
• \n

  [01:30:42] PYPY https://www.pypy.org/ es tan sofisticado que\n no lo entiende ni dios.

  \n
  \n
  • \n

    Jes\xfas Cea lo ha intentado y se ha rendido.

    \n
  \n
  • \n

    psyco: https://en.wikipedia.org/wiki/Psyco.

    \n
  \n
  • \n

    CFFI: https://cffi.readthedocs.io/en/latest/.

    \n
  \n
  \n
\n
• \n

  [01:35:22] Compilar CPython a WebAssembly\n https://en.wikipedia.org/wiki/WebAssembly va m\xe1s r\xe1pido que en\n C nativo.

  \n
\n
• \n

  [01:36:02] Simplemente compilar c\xf3digo python con Cython\n https://cython.org/ sin declaraci\xf3n de tipos dobla la\n velocidad de ejecuci\xf3n.

  \n
  \n
  • \xa1CPython lo puede hacer mejor!
  \n
  \n
\n
• \n

  [01:36:57] Subinterpreters: PEP 554:\n https://www.python.org/dev/peps/pep-0554/.

  \n

  Poder usar todos los n\xfacleos de la CPU.

  \n
\n
• \n

  [01:38:07] Seguimos hablando del asunto.

  \n
\n
• \n

  [01:39:07] Un problema es que Python tiene la vocaci\xf3n de\n funcionar en todas partes, as\xed que hay resistencia para\n implementar mejoras solo en ciertas plataformas.

  \n
\n
• \n

  [01:40:17] Cierre.

  \n

  Dadle una pesada al bug bpo35930: "Raising an exception raised\nin a "future" instance will create reference cycles":\nhttps://bugs.python.org/issue35930.

  \n
\n
• \n

  [01:41:13] Final.

  \n
\n