Rumah pembangunan bahagian belakang Tutorial Python Jurubahasa di dalam jurubahasa

Jurubahasa di dalam jurubahasa

Dec 15, 2024 pm 08:22 PM

An interpreter inside an interpreter

Beberapa bulan selepas pembangunan, saya memutuskan bintang utara saya untuk Memphis akan menjalankan pelayan Flask sepenuhnya dalam jurubahasa saya. Saya tidak tahu berapa banyak kerja yang diperlukan untuk ini, cuma ia kedengaran keren dan mungkin akan mengajar saya banyak perkara di sepanjang jalan. Jika saya membuat matlamat ini hari ini, saya mungkin memilih FastAPI atau tidak sama sekali kerana itu adalah bodoh bagi saya.

Python stdlib

Keputusan besar yang saya temui ialah cara menangani lib standard Python. Seperti yang anda mungkin biasa, lib standard bahasa bukan sebahagian daripada definisi bahasa atau masa jalan secara teknikal. Ia disertakan dengan keluaran untuk menjadikan bahasa dan masa jalan lebih berguna. Bayangkan Python tanpa threading atau sokongan async. Anda masih boleh menilai ekspresi dan kelas instantiate, tetapi kebanyakan program sedia pengeluaran memerlukan sejenis sokongan serentak.

Satu pilihan ialah menulis semula keseluruhan lib standard sendiri. Saya sedang membina jurubahasa, bukan? Saya percaya ini adalah pendekatan yang diambil oleh RustPython, yang merupakan jalan yang mengagumkan. Saya fikir saya sudah cukup untuk mendapatkan masa jalan untuk berfungsi, sedang mencari mana-mana dan semua sudut untuk dipotong, dan memutuskan untuk menentangnya.

Lib standard Python terdiri daripada dua bahagian utama: bahagian yang dilaksanakan dalam Python dan bahagian yang dilaksanakan dalam C. Cukup mudah, saya mempunyai penterjemah Python saya sendiri. Bolehkah saya mentafsirkan fail sumber Python dari mesin hos untuk memenuhi yang pertama? Ya, saya boleh. Saya perlu menyokong setiap sintaks dan ciri yang mereka gunakan, tetapi selepas itu, ia akan Berfungsi.

Bahagian C adalah tempat ia menjadi menarik. Jauh di sana pada tahun 2023, saya membuat keputusan untuk membenamkan penterjemah Python dalam penterjemah Python saya tanpa memahami sepenuhnya maksudnya. Kini tiba masanya untuk memikirkan perkara ini dan memutuskan sama ada saya mahu kekal dengan pendekatan ini atau memilih jalan lain.

Kedai interop untuk Rust dan Python ialah Pyo3. Sebagai satu-satunya permainan di bandar, Pyo3 menggunakan Antara Muka Fungsi Asing (FFI) untuk membenarkan kod Rust anda membuat panggilan ke dalam binari CPython. Ini berfungsi dengan bersetuju dengan Antara Muka Binari Aplikasi (ABI), konsep yang saya gunakan semasa kerjaya saya di AMD. Perisian teras ftw!

Mengimport modul

Kes penggunaan awal saya adalah untuk menjalankan import sys dan minta ia memberi saya objek yang boleh saya lakukan operasi akses ahli. Saya akan bercakap dengan jurubahasa di sini, tetapi ini adalah jenis sesi REPL yang saya maksudkan.

Python 3.12.5 (main, Aug  6 2024, 19:08:49) [Clang 15.0.0 (clang-1500.3.9.4)]
Type "help", "copyright", "credits" or "license" for more information.
>>> import sys
>>> sys
<module 'sys' (built-in)>
>>> type(sys.modules)
<class 'dict'>
Salin selepas log masuk
Salin selepas log masuk

Mendapatkan fungsi ini menggunakan Pyo3 adalah mudah.

pub struct CPythonModule(PyObject);

impl CPythonModule {
    pub fn new(name: &str) -> Self {
        pyo3::prepare_freethreaded_python();
        let pymodule = Python::with_gil(|py|
            PyModule::import(py, name).expect("Failed to import module").into()
        );

        Self(pymodule)
    }
}
Salin selepas log masuk
Salin selepas log masuk

Dan kami boleh menggunakan ini untuk memacu sesi REPL yang serupa di Memphis, dengan mengandaikan anda mengingati koktel bendera ciri untuk membolehkan ini dijalankan.

Python 3.12.5 (main, Aug  6 2024, 19:08:49) [Clang 15.0.0 (clang-1500.3.9.4)]
Type "help", "copyright", "credits" or "license" for more information.
>>> import sys
>>> sys
<module 'sys' (built-in)>
>>> type(sys.modules)
<class 'dict'>
Salin selepas log masuk
Salin selepas log masuk

Jika anda bertanya pada diri sendiri, bolehkah anda menggunakan pendekatan ini untuk mengimport keseluruhan lib standard (termasuk bahagian yang ditulis dalam Python dan C) dan menjadikan seluruh hidup anda, kebebasan dan mengejar kebahagiaan, lebih mudah, jawapannya ya. Itu akan menjadi pendekatan yang sah! Walau bagaimanapun, itu akan menjadikan jurubahasa saya lebih kepada shell di sekitar CPython daripada yang saya mahukan. Ini adalah latihan pembelajaran jadi saya semua untuk keputusan sewenang-wenangnya. Bagi orang puritan di luar sana yang mengatakan memuatkan mana-mana bahagian CPython di dalam Memphis menjadikan Memphis bukan jurubahasa sebenar, saya hanya akan berkata: sila tunjukkan jurubahasa anda.

Saya menjalankan ujian pantas dengan htop dengan menjalankan import sys dalam sesi REPL menggunakan Memphis dan CPython. Di Memphis, kerana ini memuatkan perpustakaan CPython ke dalam memori, ia meningkatkan penggunaan RAM (Saiz Set Residen dalam htop) sebanyak kira-kira 5MB. Sebagai perbandingan, Memphis REPL selepas memuatkan modul sys menggunakan kira-kira 9MB RAM, manakala Python REPL sebelum dan selepas memuatkan modul sys menggunakan lebih kurang sama. Saya pasti ini bukan perbandingan antara epal dengan epal, tetapi sekurang-kurangnya ia memberitahu saya bahawa Memphis tidak akan mencekik komputer saya secara perlahan-lahan sehingga mati.

Menukar objek dan menjadi wujud

Kerumitan seterusnya dengan persediaan ini melibatkan penukaran perwakilan objek Memphis saya kepada perwakilan CPython dan sebaliknya. Ini adalah kerja dalam proses dan arahan utama saya, pada mulanya, "jangan gagal" dan, lebih baru-baru ini, "tunjukkan amaran apabila anda melakukan penukaran yang rugi".

Berikut ialah penukaran saya daripada PyObject, iaitu perwakilan objek pada bahagian Pyo3, kepada ExprResult, perwakilan Memphis saya.

pub struct CPythonModule(PyObject);

impl CPythonModule {
    pub fn new(name: &str) -> Self {
        pyo3::prepare_freethreaded_python();
        let pymodule = Python::with_gil(|py|
            PyModule::import(py, name).expect("Failed to import module").into()
        );

        Self(pymodule)
    }
}
Salin selepas log masuk
Salin selepas log masuk

Dan inilah perbandingan terbalik. Ambil perhatian bahawa untuk kedua-dua ini, kita mesti memasukkan objek Python, yang mengawal akses kita kepada CPython GIL (kunci penterjemah global).

memphis 0.1.0 REPL (Type 'exit()' to quit)
>>> import sys
>>> sys
<module 'sys' (built-in)>
>>> type(sys.modules)
<class 'dict' (built-in)>
Salin selepas log masuk

Ini adalah kawasan yang kaya yang saya ingin terokai dengan lebih lanjut. Berikut ialah beberapa arah yang telah saya pertimbangkan:

  1. Tukar setiap kali objek melintasi antara muka FFI. (Dan ya, saya sedar bahawa akronim berkembang kepada antara muka antara muka fungsi asing.) Itulah kira-kira yang saya sudah lakukan, saya hanya perlu memilikinya dan tidak berasa seperti penipu. Ini mungkin mudah tetapi tidak cekap.
  2. Simpan pendaftaran supaya setiap objek wujud paling banyak sekali pada setiap sisi. Ini akan menjadi lebih cekap daripada (1), tetapi ia memerlukan nilai yang stabil yang boleh anda gunakan untuk mencari dan memautkan objek ini.
  3. Sasarkan untuk satu perwakilan di sebelah Rust dan gunakan Pyo3 untuk proksi dan malas menukar medan seperti yang diperlukan. Saya percaya ini masih akan memanfaatkan kefungsian (1), tetapi dengan cara yang lebih cekap.
  4. Jadikan susun atur memori objek Memphis sepadan dengan PyObject. Sama seperti cara #[repr(C)] sudah berfungsi dalam Rust, ini akan serupa dengan peranan yang dimainkan oleh ABI untuk panggilan fungsi. Saya tidak pasti sama ada yang ini boleh dilakukan memandangkan perbezaan dalam perkara yang perlu dilakukan oleh setiap pihak untuk menilai, tetapi ini menarik minat saya.

Saya semakin mendahului diri saya sendiri kerana saya hampir tidak dapat memuatkan modul C sekarang, tetapi sememangnya tiada penghujung di mana rasa ingin tahu saya boleh membawa saya ke kawasan ini.

Akhir

Saya terus mencuba perkara ini apabila saya mengalami kegagalan penukaran baharu sambil berlumba-lumba untuk mendapatkan Flask untuk but. Latihan ini merupakan peringatan yang baik bahawa semua objek (atau kelas, modul, dll) ialah satu set atribut yang wujud dalam format yang diketahui dalam ingatan. Jika kita memahami format itu dengan cukup baik, kita seharusnya dapat melakukan perkara yang luar biasa, tidak kira sama ada di bahagian Memphis atau CPython.

Falsafah ini mendorong kerja saya dengan From Scratch Code juga. Jika anda bosan kerana tidak dapat membuat perpustakaan berfungsi dalam kod anda, saya menggalakkan anda untuk berundur dan bertanya: apakah sebenarnya yang dilakukan oleh perpustakaan? Adakah anda memerlukannya, atau bolehkah penyelesaian yang lebih mudah berfungsi? Saya percaya dalam memupuk rasa ingin tahu tentang perisian ini—dan saya berbesar hati untuk membantu anda memasukkan pemikiran ini ke dalam kotak alat anda.


Jika anda ingin mendapatkan lebih banyak siaran seperti ini terus ke peti masuk anda, anda boleh melanggan di sini!

Di tempat lain

Selain membimbing jurutera perisian, saya juga menulis tentang pengalaman saya sebagai orang autistik yang didiagnosis dewasa. Kurang kod dan bilangan jenaka yang sama.

  • Mengapa saya inginkan pengiktirafan? - Dari org titik awal

Atas ialah kandungan terperinci Jurubahasa di dalam jurubahasa. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn

Alat AI Hot

Undresser.AI Undress

Undresser.AI Undress

Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover

AI Clothes Remover

Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool

Undress AI Tool

Gambar buka pakaian secara percuma

Clothoff.io

Clothoff.io

Penyingkiran pakaian AI

Video Face Swap

Video Face Swap

Tukar muka dalam mana-mana video dengan mudah menggunakan alat tukar muka AI percuma kami!

Artikel Panas

<🎜>: Bubble Gum Simulator Infinity - Cara Mendapatkan dan Menggunakan Kekunci Diraja
3 minggu yang lalu By 尊渡假赌尊渡假赌尊渡假赌
Nordhold: Sistem Fusion, dijelaskan
4 minggu yang lalu By 尊渡假赌尊渡假赌尊渡假赌
Mandragora: Whispers of the Witch Tree - Cara Membuka Kunci Cangkuk Bergelut
3 minggu yang lalu By 尊渡假赌尊渡假赌尊渡假赌

Alat panas

Notepad++7.3.1

Notepad++7.3.1

Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina

SublimeText3 versi Cina

Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1

Hantar Studio 13.0.1

Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6

Dreamweaver CS6

Alat pembangunan web visual

SublimeText3 versi Mac

SublimeText3 versi Mac

Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Topik panas

Tutorial Java
1669
14
Tutorial PHP
1273
29
Tutorial C#
1256
24
Python vs C: Lengkung pembelajaran dan kemudahan penggunaan Python vs C: Lengkung pembelajaran dan kemudahan penggunaan Apr 19, 2025 am 12:20 AM

Python lebih mudah dipelajari dan digunakan, manakala C lebih kuat tetapi kompleks. 1. Sintaks Python adalah ringkas dan sesuai untuk pemula. Penaipan dinamik dan pengurusan memori automatik menjadikannya mudah digunakan, tetapi boleh menyebabkan kesilapan runtime. 2.C menyediakan kawalan peringkat rendah dan ciri-ciri canggih, sesuai untuk aplikasi berprestasi tinggi, tetapi mempunyai ambang pembelajaran yang tinggi dan memerlukan memori manual dan pengurusan keselamatan jenis.

Python dan Masa: Memanfaatkan masa belajar anda Python dan Masa: Memanfaatkan masa belajar anda Apr 14, 2025 am 12:02 AM

Untuk memaksimumkan kecekapan pembelajaran Python dalam masa yang terhad, anda boleh menggunakan modul, masa, dan modul Python. 1. Modul DateTime digunakan untuk merakam dan merancang masa pembelajaran. 2. Modul Masa membantu menetapkan kajian dan masa rehat. 3. Modul Jadual secara automatik mengatur tugas pembelajaran mingguan.

Python vs C: Meneroka Prestasi dan Kecekapan Python vs C: Meneroka Prestasi dan Kecekapan Apr 18, 2025 am 12:20 AM

Python lebih baik daripada C dalam kecekapan pembangunan, tetapi C lebih tinggi dalam prestasi pelaksanaan. 1. Sintaks ringkas Python dan perpustakaan yang kaya meningkatkan kecekapan pembangunan. 2. Ciri-ciri jenis kompilasi dan kawalan perkakasan meningkatkan prestasi pelaksanaan. Apabila membuat pilihan, anda perlu menimbang kelajuan pembangunan dan kecekapan pelaksanaan berdasarkan keperluan projek.

Pembelajaran Python: Adakah 2 jam kajian harian mencukupi? Pembelajaran Python: Adakah 2 jam kajian harian mencukupi? Apr 18, 2025 am 12:22 AM

Adakah cukup untuk belajar Python selama dua jam sehari? Ia bergantung pada matlamat dan kaedah pembelajaran anda. 1) Membangunkan pelan pembelajaran yang jelas, 2) Pilih sumber dan kaedah pembelajaran yang sesuai, 3) mengamalkan dan mengkaji semula dan menyatukan amalan tangan dan mengkaji semula dan menyatukan, dan anda secara beransur-ansur boleh menguasai pengetahuan asas dan fungsi lanjutan Python dalam tempoh ini.

Yang merupakan sebahagian daripada Perpustakaan Standard Python: Senarai atau Array? Yang merupakan sebahagian daripada Perpustakaan Standard Python: Senarai atau Array? Apr 27, 2025 am 12:03 AM

Pythonlistsarepartofthestandardlibrary, sementara

Python vs C: Memahami perbezaan utama Python vs C: Memahami perbezaan utama Apr 21, 2025 am 12:18 AM

Python dan C masing -masing mempunyai kelebihan sendiri, dan pilihannya harus berdasarkan keperluan projek. 1) Python sesuai untuk pembangunan pesat dan pemprosesan data kerana sintaks ringkas dan menaip dinamik. 2) C sesuai untuk prestasi tinggi dan pengaturcaraan sistem kerana menaip statik dan pengurusan memori manual.

Python: Automasi, skrip, dan pengurusan tugas Python: Automasi, skrip, dan pengurusan tugas Apr 16, 2025 am 12:14 AM

Python cemerlang dalam automasi, skrip, dan pengurusan tugas. 1) Automasi: Sandaran fail direalisasikan melalui perpustakaan standard seperti OS dan Shutil. 2) Penulisan Skrip: Gunakan Perpustakaan Psutil untuk memantau sumber sistem. 3) Pengurusan Tugas: Gunakan perpustakaan jadual untuk menjadualkan tugas. Kemudahan penggunaan Python dan sokongan perpustakaan yang kaya menjadikannya alat pilihan di kawasan ini.

Python untuk Pembangunan Web: Aplikasi Utama Python untuk Pembangunan Web: Aplikasi Utama Apr 18, 2025 am 12:20 AM

Aplikasi utama Python dalam pembangunan web termasuk penggunaan kerangka Django dan Flask, pembangunan API, analisis data dan visualisasi, pembelajaran mesin dan AI, dan pengoptimuman prestasi. 1. Rangka Kerja Django dan Flask: Django sesuai untuk perkembangan pesat aplikasi kompleks, dan Flask sesuai untuk projek kecil atau sangat disesuaikan. 2. Pembangunan API: Gunakan Flask atau DjangorestFramework untuk membina Restfulapi. 3. Analisis Data dan Visualisasi: Gunakan Python untuk memproses data dan memaparkannya melalui antara muka web. 4. Pembelajaran Mesin dan AI: Python digunakan untuk membina aplikasi web pintar. 5. Pengoptimuman Prestasi: Dioptimumkan melalui pengaturcaraan, caching dan kod tak segerak

See all articles