ipynb นำเข้าไฟล์ ipynb อื่น

Interactive Python (ipython) นั้นยอดเยี่ยมมากโดยเฉพาะอย่างยิ่งเมื่อคุณปะติดปะต่อสิ่งต่างๆเข้าด้วยกันได้ทันที ... และทำในลักษณะที่ง่ายต่อการย้อนกลับ

อย่างไรก็ตามสิ่งที่น่าสนใจคือกรณีใช้งานของการมีโน้ตบุ๊ก ipython หลายเครื่อง (ไฟล์ ipynb) ดูเหมือนว่าโน้ตบุ๊กไม่ควรมีความสัมพันธ์กับโน้ตบุ๊กเครื่องอื่นซึ่งสมเหตุสมผลยกเว้นว่าฉันชอบที่จะนำเข้าไฟล์ ipynb อื่น ๆ

วิธีแก้ปัญหาเดียวที่ฉันเห็นคือการแปลงไฟล์ * .ipynb ของฉันเป็นไฟล์ * .py ซึ่งจะสามารถนำเข้าสู่สมุดบันทึกของฉันได้ การมีไฟล์เดียวเก็บทุกอย่างในโปรเจ็กต์นั้นค่อนข้างแปลกโดยเฉพาะอย่างยิ่งถ้าฉันต้องการผลักดันให้มีการใช้โค้ดซ้ำจริงๆ (นั่นไม่ใช่หลักการหลักของ python หรือไม่)

ฉันพลาดอะไรไปรึเปล่า? นี่ไม่ใช่กรณีการใช้งานที่รองรับของโน้ตบุ๊ก ipython ใช่หรือไม่ มีวิธีแก้ไขอื่นที่ฉันสามารถใช้สำหรับการนำเข้าไฟล์ ipynb ไปยังโน้ตบุ๊กเครื่องอื่นได้หรือไม่ ฉันชอบที่จะใช้ ipynb ต่อไป แต่ตอนนี้เวิร์กโฟลว์ของฉันยุ่งมาก :(

มันง่ายมากใน Jupyter รุ่นใหม่:

%run MyOtherNotebook.ipynb

หากคุณต้องการที่จะนำเข้าA.ipynbในB.ipynbการเขียน

import import_ipynb
import A

ในB.ipynb.

import_ipynbโมดูลฉันได้สร้างการติดตั้งผ่านทาง pip:

pip install import_ipynb

เป็นเพียงไฟล์เดียวและปฏิบัติตามวิธีการอย่างเป็นทางการบนไซต์ jupyter

PS นอกจากนี้ยังสนับสนุนสิ่งที่ชอบfrom A import foo, from A import *ฯลฯ

วิ่ง

!pip install ipynb

จากนั้นนำเข้าสมุดบันทึกอื่นเป็น

from ipynb.fs.full.<notebook_name> import *

หรือ

from ipynb.fs.full.<notebook_name> import <function_name>

ตรวจสอบให้แน่ใจว่าสมุดบันทึกทั้งหมดอยู่ในไดเร็กทอรีเดียวกัน

แก้ไข 1: คุณสามารถดูเอกสารอย่างเป็นทางการได้ที่นี่ - https://ipynb.readthedocs.io/en/stable/

นอกจากนี้หากคุณต้องการนำเข้าเฉพาะนิยามคลาสและฟังก์ชันจากสมุดบันทึก (ไม่ใช่คำสั่งระดับบนสุด) คุณสามารถใช้ipynb.fs.defsแทนipynb.fs.fullไฟล์. การกำหนดตัวแปรตัวพิมพ์ใหญ่เต็มจะได้รับการประเมินเช่นกัน

ติดตั้ง ipynb จากพรอมต์คำสั่งของคุณ

pip install import-ipynb

นำเข้าไฟล์สมุดบันทึกของคุณ

import import_ipynb

ตอนนี้ใช้คำสั่ง import ปกติเพื่อนำเข้าไฟล์ของคุณ

import MyOtherNotebook

คุณสามารถใช้import nbimporterแล้วimport notebookName

ความคิดเห็นที่กล่าวถึงข้างต้นมีประโยชน์มาก แต่ค่อนข้างยากที่จะนำไปใช้ ด้านล่างขั้นตอนที่คุณสามารถลองฉันได้ลองแล้วและได้ผล:

1. ดาวน์โหลดไฟล์นั้นจากสมุดบันทึกของคุณในรูปแบบไฟล์ PY (คุณสามารถค้นหาตัวเลือกนั้นได้ในแท็บไฟล์)
2. ตอนนี้คัดลอกไฟล์ที่ดาวน์โหลดลงในไดเร็กทอรีการทำงานของ Jupyter Notebook
3. ตอนนี้คุณพร้อมใช้งานแล้ว เพียงแค่นำเข้าไฟล์. PY ไปยังไฟล์ ipynb

ปัญหาคือโน้ตบุ๊กไม่ใช่ไฟล์ Python ธรรมดา ขั้นตอนในการนำเข้า.ipynbไฟล์มีดังต่อไปนี้: การนำเข้าสมุดบันทึก

ฉันกำลังวางรหัสดังนั้นหากคุณต้องการ ... คุณสามารถคัดลอกและวางได้อย่างรวดเร็ว สังเกตว่าในตอนท้ายฉันมีimport primesคำสั่ง คุณจะต้องเปลี่ยนแน่นอน ชื่อไฟล์ของฉันคือprimes.ipynb. จากจุดนี้คุณสามารถใช้เนื้อหาภายในไฟล์นั้นได้ตามปกติ

หวังว่าจะมีวิธีที่ง่ายกว่านี้ แต่นี่มาจากเอกสารโดยตรง
หมายเหตุ: ฉันใช้ jupyter ไม่ใช่ ipython

import io, os, sys, types
from IPython import get_ipython
from nbformat import current
from IPython.core.interactiveshell import InteractiveShell


def find_notebook(fullname, path=None):
    """find a notebook, given its fully qualified name and an optional path

    This turns "foo.bar" into "foo/bar.ipynb"
    and tries turning "Foo_Bar" into "Foo Bar" if Foo_Bar
    does not exist.
    """
    name = fullname.rsplit('.', 1)[-1]
    if not path:
        path = ['']
    for d in path:
        nb_path = os.path.join(d, name + ".ipynb")
        if os.path.isfile(nb_path):
            return nb_path
        # let import Notebook_Name find "Notebook Name.ipynb"
        nb_path = nb_path.replace("_", " ")
        if os.path.isfile(nb_path):
            return nb_path


class NotebookLoader(object):
    """Module Loader for Jupyter Notebooks"""
    def __init__(self, path=None):
        self.shell = InteractiveShell.instance()
        self.path = path

    def load_module(self, fullname):
        """import a notebook as a module"""
        path = find_notebook(fullname, self.path)

        print ("importing Jupyter notebook from %s" % path)

        # load the notebook object
        with io.open(path, 'r', encoding='utf-8') as f:
            nb = current.read(f, 'json')


        # create the module and add it to sys.modules
        # if name in sys.modules:
        #    return sys.modules[name]
        mod = types.ModuleType(fullname)
        mod.__file__ = path
        mod.__loader__ = self
        mod.__dict__['get_ipython'] = get_ipython
        sys.modules[fullname] = mod

        # extra work to ensure that magics that would affect the user_ns
        # actually affect the notebook module's ns
        save_user_ns = self.shell.user_ns
        self.shell.user_ns = mod.__dict__

        try:
        for cell in nb.worksheets[0].cells:
            if cell.cell_type == 'code' and cell.language == 'python':
                # transform the input to executable Python
                code = self.shell.input_transformer_manager.transform_cell(cell.input)
                # run the code in themodule
                exec(code, mod.__dict__)
        finally:
            self.shell.user_ns = save_user_ns
        return mod


class NotebookFinder(object):
    """Module finder that locates Jupyter Notebooks"""
    def __init__(self):
        self.loaders = {}

    def find_module(self, fullname, path=None):
        nb_path = find_notebook(fullname, path)
        if not nb_path:
            return

        key = path
        if path:
            # lists aren't hashable
            key = os.path.sep.join(path)

        if key not in self.loaders:
            self.loaders[key] = NotebookLoader(path)
        return self.loaders[key]

sys.meta_path.append(NotebookFinder())

import primes

ไม่มีปัญหาเลยในการใช้ Jupyter กับโมดูล Python .py ที่มีอยู่หรือใหม่ เมื่อ Jupyter ทำงานเพียงแค่เปิด Spyder (หรือโปรแกรมแก้ไขที่คุณเลือก) เพื่อสร้าง / แก้ไขข้อกำหนดคลาสโมดูลของคุณในไฟล์. py จากนั้นนำเข้าโมดูลตามความจำเป็นใน Jupyter

สิ่งหนึ่งที่ทำให้สิ่งนี้ราบรื่นจริงๆคือการใช้ส่วนขยายมายากลอัตโนมัติ คุณสามารถดูเอกสารสำหรับการโหลดอัตโนมัติได้ที่นี่:

http://ipython.readthedocs.io/en/stable/config/extensions/autoreload.html

นี่คือรหัสสำหรับโหลดโมดูลใหม่โดยอัตโนมัติทุกครั้งที่มีการแก้ไข:

# autoreload sets up auto reloading of modified .py modules
import autoreload
%load_ext autoreload
%autoreload 2

โปรดทราบว่าฉันลองใช้รหัสที่กล่าวถึงในการตอบกลับก่อนหน้านี้เพื่อจำลองการโหลดไฟล์. ipynb เป็นโมดูลและทำให้มันใช้งานได้ แต่จะเกิดขึ้นเมื่อคุณทำการเปลี่ยนแปลงไฟล์. ipynb ดูเหมือนว่าคุณต้องรีสตาร์ทสภาพแวดล้อมการพัฒนา Jupyter เพื่อที่จะโหลด. ipynb 'module' ใหม่ซึ่งฉันไม่สามารถยอมรับได้เนื่องจากฉันทำการเปลี่ยนแปลงโค้ดของฉันมากมาย

โปรดตรวจสอบให้แน่ใจว่าคุณได้เพิ่ม__init__.pyไฟล์ในแพ็กเกจที่มีไฟล์. ipynb อื่น ๆ ทั้งหมดของคุณ

นี้คือนอกจากจะเชื่อมโยง nbviewer ที่minrkและsyiให้ไว้ข้างต้น

ฉันยังมีปัญหาที่คล้ายกันจากนั้นฉันก็เขียนวิธีแก้ปัญหารวมถึงลิงก์ไปยังโฟลเดอร์ไดรฟ์ Google สาธารณะของฉันซึ่งมีตัวอย่างการทำงาน :)

โพสต์ Stackoverflow ของฉันพร้อมการทดลองและวิธีแก้ไขทีละขั้นตอน:

Jupyter Notebook: นำเข้าไฟล์. ipynb และเข้าถึงวิธีการในไฟล์. ipynb อื่นที่ให้ข้อผิดพลาด

หวังว่านี่จะช่วยคนอื่น ๆ เช่นกัน ขอบคุณทุกคน!

% เรียกใช้ YourNotebookfile.ipynb ทำงานได้ดี

หากคุณต้องการนำเข้าโมดูลเฉพาะให้เพิ่มคำสั่งนำเข้าหลังจาก ipynb เช่น YourNotebookfile.ipynb มี def Add ()

จากนั้นคุณก็สามารถใช้งานได้

%run YourNotebookfile.ipynb import Add