Có cách nào để sử dụng PhantomJS trong Python không?

Tôi muốn sử dụng PhantomJS trong Python . Tôi đã giải quyết vấn đề này nhưng không thể tìm ra giải pháp thích hợp.

Tôi thấy os.popen() có thể là một lựa chọn tốt. Nhưng tôi không thể truyền một số lý lẽ cho nó.

Sử dụng subprocess.Popen()có thể là một giải pháp thích hợp cho bây giờ. Tôi muốn biết liệu có một giải pháp tốt hơn hay không.

Có cách nào để sử dụng PhantomJS trong Python không?

Cách dễ nhất để sử dụng PhantomJS trong python là thông qua Selenium. Phương pháp cài đặt đơn giản nhất là

1. Cài đặt NodeJS
2. Sử dụng trình quản lý gói của Node cài đặt ph Phantomjs: npm -g install phantomjs-prebuilt
3. cài đặt selenium (trong virtualenv của bạn, nếu bạn đang sử dụng)

Sau khi cài đặt, bạn có thể sử dụng ph Phantom đơn giản như:

from selenium import webdriver

driver = webdriver.PhantomJS() # or add to your PATH
driver.set_window_size(1024, 768) # optional
driver.get('https://google.com/')
driver.save_screenshot('screen.png') # save a screenshot to disk
sbtn = driver.find_element_by_css_selector('button.gbqfba')
sbtn.click()

Nếu biến môi trường đường dẫn hệ thống của bạn không được đặt chính xác, bạn sẽ cần chỉ định đường dẫn chính xác làm đối số webdriver.PhantomJS(). Thay thế này:

driver = webdriver.PhantomJS() # or add to your PATH

... với những điều sau đây:

driver = webdriver.PhantomJS(executable_path='/usr/local/lib/node_modules/phantomjs/lib/phantom/bin/phantomjs')

Người giới thiệu:

• http://selenium-python.readthedocs.io/
• Làm cách nào để đặt proxy cho ph Phantomjs / ghostdo trong webthon python?
• https://dzone.com/articles/python-testing-ph Phantomjs

PhantomJS gần đây đã bỏ hỗ trợ Python hoàn toàn. Tuy nhiên, PhantomJS hiện nhúng Ghost Driver .

Một dự án mới đã bước lên để lấp đầy khoảng trống : ghost.py. Bạn có thể muốn sử dụng thay thế:

from ghost import Ghost
ghost = Ghost()

with ghost.start() as session:
    page, extra_resources = ghost.open("http://jeanphi.me")
    assert page.http_status==200 and 'jeanphix' in ghost.content

Bây giờ kể từ khi GhostDriver đi kèm với PhantomJS, việc sử dụng nó thông qua Selenium trở nên thuận tiện hơn nữa.

Tôi đã thử cài đặt Node của PhantomJS, theo đề xuất của Pykler, nhưng trong thực tế tôi thấy nó chậm hơn so với cài đặt độc lập của PhantomJS. Tôi đoán cài đặt độc lập đã không cung cấp các tính năng này sớm hơn, nhưng kể từ v1.9, nó rất giống như vậy.

1. Cài đặt PhantomJS ( http ://ph Phantomjs.org/doad.html ) (Nếu bạn đang dùng Linux, các hướng dẫn sau sẽ giúp https://stackoverflow.com/a/14267295/382630 )
2. Cài đặt Selenium bằng pip.

Bây giờ bạn có thể sử dụng như thế này

import selenium.webdriver
driver = selenium.webdriver.PhantomJS()
driver.get('http://google.com')
# do some processing

driver.quit()

Đây là cách tôi kiểm tra javascript bằng PhantomJS và Django:

di động / test_no_js_errors.js :

var page = require('webpage').create(),
    system = require('system'),
    url = system.args[1],
    status_code;

page.onError = function (msg, trace) {
    console.log(msg);
    trace.forEach(function(item) {
        console.log('  ', item.file, ':', item.line);
    });
};

page.onResourceReceived = function(resource) {
    if (resource.url == url) {
        status_code = resource.status;
    }
};

page.open(url, function (status) {
    if (status == "fail" || status_code != 200) {
        console.log("Error: " + status_code + " for url: " + url);
        phantom.exit(1);
    }
    phantom.exit(0);
});

điện thoại di động / tests.py :

import subprocess
from django.test import LiveServerTestCase

class MobileTest(LiveServerTestCase):
    def test_mobile_js(self):
        args = ["phantomjs", "mobile/test_no_js_errors.js", self.live_server_url]
        result = subprocess.check_output(args)
        self.assertEqual(result, "")  # No result means no error

Chạy thử nghiệm :

manage.py test mobile

Câu trả lời của @Pykler rất hay nhưng yêu cầu của Node đã lỗi thời. Các ý kiến ​​trong câu trả lời đó cho thấy câu trả lời đơn giản hơn mà tôi đã đặt ở đây để tiết kiệm thời gian cho người khác:

1. Cài đặt PhantomJS

   Như @ Vivin-Paliath chỉ ra, đó là một dự án độc lập, không phải là một phần của Node.

   Mac:

   brew install phantomjs

   Ubuntu:

   sudo apt-get install phantomjs

   Vân vân

2. Thiết lập một virtualenv(nếu bạn chưa có):

   virtualenv mypy  # doesn't have to be "mypy". Can be anything.
   . mypy/bin/activate

   Nếu máy của bạn có cả Python 2 và 3, bạn có thể cần chạy virtualenv-3.6 mypyhoặc tương tự.

3. Cài đặt selen:

   pip install selenium

4. Hãy thử một bài kiểm tra đơn giản, như thế này mượn từ các tài liệu :

   from selenium import webdriver
   from selenium.webdriver.common.keys import Keys
   
   driver = webdriver.PhantomJS()
   driver.get("http://www.python.org")
   assert "Python" in driver.title
   elem = driver.find_element_by_name("q")
   elem.clear()
   elem.send_keys("pycon")
   elem.send_keys(Keys.RETURN)
   assert "No results found." not in driver.page_source
   driver.close()

đây là những gì tôi làm, python3.3. Tôi đã xử lý danh sách lớn các trang web, vì vậy việc không có thời gian chờ là rất quan trọng để công việc chạy qua toàn bộ danh sách.

command = "phantomjs --ignore-ssl-errors=true "+<your js file for phantom>
process = subprocess.Popen(command, shell=True, stdout=subprocess.PIPE)

# make sure phantomjs has time to download/process the page
# but if we get nothing after 30 sec, just move on
try:
    output, errors = process.communicate(timeout=30)
except Exception as e:
    print("\t\tException: %s" % e)
    process.kill()

# output will be weird, decode to utf-8 to save heartache
phantom_output = ''
for out_line in output.splitlines():
    phantom_output += out_line.decode('utf-8')

Nếu sử dụng Anaconda, hãy cài đặt với:

conda install PhantomJS

trong kịch bản của bạn:

from selenium import webdriver
driver=webdriver.PhantomJS()

hoạt động hoàn hảo.

Trong trường hợp bạn đang sử dụng Buildout , bạn có thể dễ dàng tự động hóa các quy trình cài đặt mà Pykler mô tả bằng cách sử dụng công thức gp.recipe.node .

[nodejs]
recipe = gp.recipe.node
version = 0.10.32
npms = phantomjs
scripts = phantomjs

Phần đó cài đặt node.js dưới dạng nhị phân (ít nhất là trên hệ thống của tôi) và sau đó sử dụng npm để cài đặt PhantomJS. Cuối cùng, nó tạo ra một điểm vào bin/phantomjsmà bạn có thể gọi cho webJ của PhantomJS. (Để cài đặt Selenium, bạn cần chỉ định nó trong yêu cầu trứng của bạn hoặc trong cấu hình Buildout.)

driver = webdriver.PhantomJS('bin/phantomjs')