web-dev-qa-db-ja.com

JupyterノートブックでPython asyncioコードを実行するにはどうすればよいですか?

Pythonインタープリター(CPython 3.6.2)で正常に動作するasyncioコードがいくつかあります。IPythonカーネルを備えたJupyterノートブック内でこれを実行したいと思います。

私はそれを実行できます

import asyncio
asyncio.get_event_loop().run_forever()

そして、それは機能しているように見えますが、ノートブックをブロックしているようで、ノートブックでニースをプレイしていないようです。

私の理解では、Jupyterはフードの下でTornadoを使用しているため、 Tornadoのドキュメントで推奨されているようにTornadoイベントループをインストールします

from tornado.platform.asyncio import AsyncIOMainLoop
AsyncIOMainLoop().install()

ただし、次のエラーが発生します。

---------------------------------------------------------------------------
AssertionError                            Traceback (most recent call last)
<ipython-input-1-1139449343fc> in <module>()
      1 from tornado.platform.asyncio import AsyncIOMainLoop
----> 2 AsyncIOMainLoop().install()

~\AppData\Local\Continuum\Anaconda3\envs\numismatic\lib\site- packages\tornado\ioloop.py in install(self)
    179         `IOLoop` (e.g.,     :class:`tornado.httpclient.AsyncHTTPClient`).
    180         """
--> 181         assert not IOLoop.initialized()
    182         IOLoop._instance = self
    183 

AssertionError: 

最後に、次のページを見つけました。 http://ipywidgets.readthedocs.io/en/stable/examples/Widget%20Asynchronous.html

そこで、次のコードでセルを追加しました。

import asyncio
from ipykernel.eventloops import register_integration

@register_integration('asyncio')
def loop_asyncio(kernel):
    '''Start a kernel with asyncio event loop support.'''
    loop = asyncio.get_event_loop()

    def kernel_handler():
        loop.call_soon(kernel.do_one_iteration)
        loop.call_later(kernel._poll_interval, kernel_handler)

    loop.call_soon(kernel_handler)
    try:
        if not loop.is_running():
            loop.run_forever()
    finally:
        loop.run_until_complete(loop.shutdown_asyncgens())
        loop.close()

そして次のセルで私は走った:

%gui asyncio

それはうまくいきましたが、私はそれがなぜそしてどのように機能するか本当に理解していません。誰かがそれを私に説明してもらえますか?

21
snth

2019年2月21日編集:問題が修正されました

これは、Jupyter Notebookの最新バージョンではもう問題ではありません。 Jupyter Notebookの作成者は、ケースを詳細に説明しました こちら

以下の回答は、opによって正しいとマークされた元の応答でした。


これはかなり前に投稿されましたが、他の人がJupyter Notebook内で非同期コードを実行する問題の説明と解決策を探している場合に備えて。

JupyterのTornado 5.0アップデートは、独自のasyncioイベントループを追加した後、asyncioの機能をブリックしました。

Terminal output of <code>get_event_loop()</code>Jupyter Notebook output of <code>get_event_loop()</code>

したがって、Asyncio機能をJupyter Notebookで実行するには、cannotrun_until_complete()を呼び出します。これは、asyncio.get_event_loop()がアクティブになります。

代わりに、タスクを現在のループに追加する必要があります。

import asyncio
loop = asyncio.get_event_loop()
loop.create_task(some_async_function())

Jupyter Notebookで実行する簡単な例:

enter image description here

23
Felipe Faria

これは、最新のjupyterリリースではもう問題ではありません!

https://blog.jupyter.org/ipython-7-0-async-repl-a35ce050f7f7

非同期関数を作成し、jupyterセルで直接待機します。

async def fn():
  print('hello')
  await asyncio.sleep(1)
  print('world')

await fn()
15
James D

JupyterでAsyncioを使用した私の瞬間は次のようになります。

import time,asyncio

async def count():
    print("count one")
    await asyncio.sleep(1)
    print("count four")

async def count_further():
    print("count two")
    await asyncio.sleep(1)
    print("count five")

async def count_even_further():
    print("count three")
    await asyncio.sleep(1)
    print("count six")

async def main():
    await asyncio.gather(count(), count_further(), count_even_further())

s = time.perf_counter()
await main()
elapsed = time.perf_counter() - s
print(f"Script executed in {elapsed:0.2f} seconds.")

出力:

count one
count two
count three
count four
count five
count six
Script executed in 1.00 seconds.

元々ここからですが、最初は例が明確ではありませんでした: https://realpython.com/async-io-python/

最近、Jupyterノートブックでasyncioコードを実行できないという問題に遭遇しました。ここで問題について説明します: https://github.com/jupyter/notebook/issues/3397

ディスカッションで解決策の1つを試したところ、これまでのところ問題が解決しました。

pip3 install tornado==4.5.3

これは、デフォルトでインストールされたトルネードバージョン5.xを置き換えました。

その後、Jupyterノートブックのasyncioコードは期待どおりに実行されました。

2
DMfll