source: orange/Orange/OrangeWidgets/Data/OWPythonScript.py @ 11328:a32e70dc9220

Revision 11328:a32e70dc9220, 22.1 KB checked in by Ales Erjavec <ales.erjavec@…>, 14 months ago (diff)

Ported to new Orange namespace (orange2to25).

Line 
1"""
2<name>Python Script</name>
3<description>Executes python script.</description>
4<icon>icons/PythonScript.svg</icon>
5<contact>Miha Stajdohar (miha.stajdohar(@at@)gmail.com)</contact>
6<priority>3150</priority>
7"""
8import sys
9import os
10import code
11import keyword
12
13from PyQt4.QtGui import (
14    QSyntaxHighlighter, QPlainTextEdit, QTextCharFormat, QTextCursor,
15    QTextDocument, QPlainTextDocumentLayout, QBrush, QFont, QColor, QPalette,
16    QStyledItemDelegate, QStyleOptionViewItemV4, QLineEdit, QListView,
17    QSizePolicy, QAction, QMenu, QKeySequence, QSplitter, QToolButton,
18    QItemSelectionModel, QFileDialog
19)
20
21from PyQt4.QtCore import Qt, QRegExp, QByteArray
22from PyQt4.QtCore import SIGNAL
23
24from OWWidget import *
25
26from OWItemModels import PyListModel, ModelActionsWidget
27
28import OWGUI
29import Orange
30
31
32class PythonSyntaxHighlighter(QSyntaxHighlighter):
33    def __init__(self, parent=None):
34        self.keywordFormat = QTextCharFormat()
35        self.keywordFormat.setForeground(QBrush(Qt.blue))
36        self.keywordFormat.setFontWeight(QFont.Bold)
37        self.stringFormat = QTextCharFormat()
38        self.stringFormat.setForeground(QBrush(Qt.darkGreen))
39        self.defFormat = QTextCharFormat()
40        self.defFormat.setForeground(QBrush(Qt.black))
41        self.defFormat.setFontWeight(QFont.Bold)
42        self.commentFormat = QTextCharFormat()
43        self.commentFormat.setForeground(QBrush(Qt.lightGray))
44        self.decoratorFormat = QTextCharFormat()
45        self.decoratorFormat.setForeground(QBrush(Qt.darkGray))
46
47        self.keywords = list(keyword.kwlist)
48
49        self.rules = [(QRegExp(r"\b%s\b" % kwd), self.keywordFormat)
50                      for kwd in self.keywords] + \
51                     [(QRegExp(r"\bdef\s+([A-Za-z_]+[A-Za-z0-9_]+)\s*\("),
52                       self.defFormat),
53                      (QRegExp(r"\bclass\s+([A-Za-z_]+[A-Za-z0-9_]+)\s*\("),
54                       self.defFormat),
55                      (QRegExp(r"'.*'"), self.stringFormat),
56                      (QRegExp(r'".*"'), self.stringFormat),
57                      (QRegExp(r"#.*"), self.commentFormat),
58                      (QRegExp(r"@[A-Za-z_]+[A-Za-z0-9_]+"),
59                       self.decoratorFormat)]
60
61        self.multilineStart = QRegExp(r"(''')|" + r'(""")')
62        self.multilineEnd = QRegExp(r"(''')|" + r'(""")')
63
64        QSyntaxHighlighter.__init__(self, parent)
65
66    def highlightBlock(self, text):
67        for pattern, format in self.rules:
68            exp = QRegExp(pattern)
69            index = exp.indexIn(text)
70            while index >= 0:
71                length = exp.matchedLength()
72                if exp.numCaptures() > 0:
73                    self.setFormat(exp.pos(1), len(str(exp.cap(1))), format)
74                else:
75                    self.setFormat(exp.pos(0), len(str(exp.cap(0))), format)
76                index = exp.indexIn(text, index + length)
77
78        # Multi line strings
79        start = self.multilineStart
80        end = self.multilineEnd
81
82        self.setCurrentBlockState(0)
83        startIndex, skip = 0, 0
84        if self.previousBlockState() != 1:
85            startIndex, skip = start.indexIn(text), 3
86        while startIndex >= 0:
87            endIndex = end.indexIn(text, startIndex + skip)
88            if endIndex == -1:
89                self.setCurrentBlockState(1)
90                commentLen = len(text) - startIndex
91            else:
92                commentLen = endIndex - startIndex + 3
93            self.setFormat(startIndex, commentLen, self.stringFormat)
94            startIndex, skip = (start.indexIn(text,
95                                              startIndex + commentLen + 3),
96                                3)
97
98
99class PythonScriptEditor(QPlainTextEdit):
100    INDENT = 4
101
102    def lastLine(self):
103        text = str(self.toPlainText())
104        pos = self.textCursor().position()
105        index = text.rfind("\n", 0, pos)
106        text = text[index: pos].lstrip("\n")
107        return text
108
109    def keyPressEvent(self, event):
110        if event.key() == Qt.Key_Return:
111            text = self.lastLine()
112            indent = len(text) - len(text.lstrip())
113            if text.strip() == "pass" or text.strip().startswith("return "):
114                indent = max(0, indent - self.INDENT)
115            elif text.strip().endswith(":"):
116                indent += self.INDENT
117            QPlainTextEdit.keyPressEvent(self, event)
118            self.insertPlainText(" " * indent)
119        elif event.key() == Qt.Key_Tab:
120            self.insertPlainText(" " * self.INDENT)
121        elif event.key() == Qt.Key_Backspace:
122            text = self.lastLine()
123            if text and not text.strip():
124                cursor = self.textCursor()
125                for i in range(min(self.INDENT, len(text))):
126                    cursor.deletePreviousChar()
127            else:
128                QPlainTextEdit.keyPressEvent(self, event)
129
130        else:
131            QPlainTextEdit.keyPressEvent(self, event)
132
133
134class PythonConsole(QPlainTextEdit, code.InteractiveConsole):
135    def __init__(self, locals=None, parent=None):
136        QPlainTextEdit.__init__(self, parent)
137        code.InteractiveConsole.__init__(self, locals)
138        self.history, self.historyInd = [""], 0
139        self.loop = self.interact()
140        self.loop.next()
141
142    def setLocals(self, locals):
143        self.locals = locals
144
145    def interact(self, banner=None):
146        try:
147            sys.ps1
148        except AttributeError:
149            sys.ps1 = ">>> "
150        try:
151            sys.ps2
152        except AttributeError:
153            sys.ps2 = "... "
154        cprt = ('Type "help", "copyright", "credits" or "license" '
155                'for more information.')
156        if banner is None:
157            self.write("Python %s on %s\n%s\n(%s)\n" %
158                       (sys.version, sys.platform, cprt,
159                        self.__class__.__name__))
160        else:
161            self.write("%s\n" % str(banner))
162        more = 0
163        while 1:
164            try:
165                if more:
166                    prompt = sys.ps2
167                else:
168                    prompt = sys.ps1
169                self.new_prompt(prompt)
170                yield
171                try:
172                    line = self.raw_input(prompt)
173                except EOFError:
174                    self.write("\n")
175                    break
176                else:
177                    more = self.push(line)
178            except KeyboardInterrupt:
179                self.write("\nKeyboardInterrupt\n")
180                self.resetbuffer()
181                more = 0
182
183    def raw_input(self, prompt):
184        input = str(self.document().lastBlock().previous().text())
185        return input[len(prompt):]
186
187    def new_prompt(self, prompt):
188        self.write(prompt)
189        self.newPromptPos = self.textCursor().position()
190
191    def write(self, data):
192        cursor = QTextCursor(self.document())
193        cursor.movePosition(QTextCursor.End, QTextCursor.MoveAnchor)
194        cursor.insertText(data)
195        self.setTextCursor(cursor)
196        self.ensureCursorVisible()
197
198    def push(self, line):
199        if self.history[0] != line:
200            self.history.insert(0, line)
201        self.historyInd = 0
202
203        saved = sys.stdout, sys.stderr
204        try:
205            sys.stdout, sys.stderr = self, self
206            return code.InteractiveConsole.push(self, line)
207        finally:
208            sys.stdout, sys.stderr = saved
209
210    def setLine(self, line):
211        cursor = QTextCursor(self.document())
212        cursor.movePosition(QTextCursor.End)
213        cursor.setPosition(self.newPromptPos, QTextCursor.KeepAnchor)
214        cursor.removeSelectedText()
215        cursor.insertText(line)
216        self.setTextCursor(cursor)
217
218    def keyPressEvent(self, event):
219        if event.key() == Qt.Key_Return:
220            self.write("\n")
221            self.loop.next()
222        elif event.key() == Qt.Key_Up:
223            self.historyUp()
224        elif event.key() == Qt.Key_Down:
225            self.historyDown()
226        elif event.key() == Qt.Key_Tab:
227            self.complete()
228        elif event.key() in [Qt.Key_Left, Qt.Key_Backspace]:
229            if self.textCursor().position() > self.newPromptPos:
230                QPlainTextEdit.keyPressEvent(self, event)
231        else:
232            QPlainTextEdit.keyPressEvent(self, event)
233
234    def historyUp(self):
235        self.setLine(self.history[self.historyInd])
236        self.historyInd = min(self.historyInd + 1, len(self.history) - 1)
237
238    def historyDown(self):
239        self.setLine(self.history[self.historyInd])
240        self.historyInd = max(self.historyInd - 1, 0)
241
242    def complete(self):
243        pass
244
245
246class Script(object):
247    Modified = 1
248    MissingFromFilesystem = 2
249
250    def __init__(self, name, script, flags=0, sourceFileName=None):
251        self.name = name
252        self.script = script
253        self.flags = flags
254        self.sourceFileName = sourceFileName
255        self.modifiedScript = None
256
257
258class ScriptItemDelegate(QStyledItemDelegate):
259    def __init__(self, parent):
260        QStyledItemDelegate.__init__(self, parent)
261
262    def displayText(self, variant, locale):
263        script = variant.toPyObject()
264        if script.flags & Script.Modified:
265            return QString("*" + script.name)
266        else:
267            return QString(script.name)
268
269    def paint(self, painter, option, index):
270        script = index.data(Qt.DisplayRole).toPyObject()
271
272        if script.flags & Script.Modified:
273            option = QStyleOptionViewItemV4(option)
274            option.palette.setColor(QPalette.Text, QColor(Qt.red))
275            option.palette.setColor(QPalette.Highlight, QColor(Qt.darkRed))
276        QStyledItemDelegate.paint(self, painter, option, index)
277
278    def createEditor(self, parent, option, index):
279        return QLineEdit(parent)
280
281    def setEditorData(self, editor, index):
282        script = index.data(Qt.DisplayRole).toPyObject()
283        editor.setText(script.name)
284
285    def setModelData(self, editor, model, index):
286        model[index.row()].name = str(editor.text())
287
288
289class OWPythonScript(OWWidget):
290
291    settingsList = ["codeFile", "libraryListSource", "currentScriptIndex",
292                    "splitterState"]
293
294    def __init__(self, parent=None, signalManager=None):
295        OWWidget.__init__(self, parent, signalManager, 'Python Script')
296
297        self.inputs = [("in_data", Orange.data.Table, self.setExampleTable),
298                       ("in_distance", Orange.misc.SymMatrix,
299                        self.setDistanceMatrix),
300                       ("in_learner", Orange.core.Learner, self.setLearner),
301                       ("in_classifier", Orange.core.Classifier,
302                        self.setClassifier)]
303
304        self.outputs = [("out_data", Orange.data.Table),
305                        ("out_distance", Orange.misc.SymMatrix),
306                        ("out_learner", Orange.core.Learner),
307                        ("out_classifier", Orange.core.Classifier, Dynamic)]
308
309        try:
310            self.inputs.append(("in_network", Orange.network.Graph, self.setNetwork))
311            self.outputs.append(("out_network", Orange.network.Graph))
312        except:
313            pass
314
315        self.in_data = None
316        self.in_network = None
317        self.in_distance = None
318        self.in_learner = None
319        self.in_classifier = None
320
321        self.codeFile = ''
322        self.libraryListSource = [Script("Hello world",
323                                         "print 'Hello world'\n")]
324        self.currentScriptIndex = 0
325        self.splitterState = None
326        self.loadSettings()
327
328        for s in self.libraryListSource:
329            s.flags = 0
330
331        self._cachedDocuments = {}
332
333        self.infoBox = OWGUI.widgetBox(self.controlArea, 'Info')
334        OWGUI.label(
335            self.infoBox, self,
336            "<p>Execute python script.</p><p>Input variables:<ul><li> " + \
337            "<li>".join(t[0] for t in self.inputs) + \
338            "</ul></p><p>Output variables:<ul><li>" + \
339            "<li>".join(t[0] for t in self.outputs) + \
340            "</ul></p>"
341        )
342
343        self.libraryList = PyListModel([], self, flags=Qt.ItemIsSelectable | \
344                                       Qt.ItemIsEnabled | Qt.ItemIsEditable)
345
346        self.libraryList.wrap(self.libraryListSource)
347
348        self.controlBox = OWGUI.widgetBox(self.controlArea, 'Library')
349        self.controlBox.layout().setSpacing(1)
350
351        self.libraryView = QListView()
352        self.libraryView.setEditTriggers(QListView.DoubleClicked | \
353                                         QListView.EditKeyPressed)
354        self.libraryView.setSizePolicy(QSizePolicy.Ignored,
355                                       QSizePolicy.Preferred)
356        self.libraryView.setItemDelegate(ScriptItemDelegate(self))
357        self.libraryView.setModel(self.libraryList)
358
359        self.connect(self.libraryView.selectionModel(),
360                     SIGNAL("selectionChanged(QItemSelection, QItemSelection)"),
361                     self.onSelectedScriptChanged)
362        self.controlBox.layout().addWidget(self.libraryView)
363
364        w = ModelActionsWidget()
365
366        self.addNewScriptAction = action = QAction("+", self)
367        action.setToolTip("Add a new script to the library")
368        self.connect(action, SIGNAL("triggered()"), self.onAddScript)
369        w.addAction(action)
370
371        self.removeAction = action = QAction("-", self)
372        action.setToolTip("Remove script from library")
373        self.connect(action, SIGNAL("triggered()"), self.onRemoveScript)
374        w.addAction(action)
375
376        action = QAction("Update", self)
377        action.setToolTip("Save changes in the editor to library")
378        action.setShortcut(QKeySequence(QKeySequence.Save))
379        self.connect(action, SIGNAL("triggered()"),
380                     self.commitChangesToLibrary)
381        w.addAction(action)
382
383        action = QAction("More", self)
384        action.pyqtConfigure(toolTip="More actions")
385
386        new_from_file = QAction("Import a script from a file", self)
387        save_to_file = QAction("Save selected script to a file", self)
388        save_to_file.setShortcut(QKeySequence(QKeySequence.SaveAs))
389
390        self.connect(new_from_file, SIGNAL("triggered()"),
391                     self.onAddScriptFromFile)
392        self.connect(save_to_file, SIGNAL("triggered()"), self.saveScript)
393
394        menu = QMenu(w)
395        menu.addAction(new_from_file)
396        menu.addAction(save_to_file)
397        action.setMenu(menu)
398        button = w.addAction(action)
399        button.setPopupMode(QToolButton.InstantPopup)
400
401        w.layout().setSpacing(1)
402
403        self.controlBox.layout().addWidget(w)
404
405        self.runBox = OWGUI.widgetBox(self.controlArea, 'Run')
406        OWGUI.button(self.runBox, self, "Execute", callback=self.execute)
407
408        self.splitCanvas = QSplitter(Qt.Vertical, self.mainArea)
409        self.mainArea.layout().addWidget(self.splitCanvas)
410
411        self.defaultFont = defaultFont = \
412            "Monaco" if sys.platform == "darwin" else "Courier"
413
414        self.textBox = OWGUI.widgetBox(self, 'Python script')
415        self.splitCanvas.addWidget(self.textBox)
416        self.text = PythonScriptEditor(self)
417        self.textBox.layout().addWidget(self.text)
418
419        self.textBox.setAlignment(Qt.AlignVCenter)
420        self.text.setTabStopWidth(4)
421
422        self.connect(self.text, SIGNAL("modificationChanged(bool)"),
423                     self.onModificationChanged)
424
425        self.saveAction = action = QAction("&Save", self.text)
426        action.setToolTip("Save script to file")
427        action.setShortcut(QKeySequence(QKeySequence.Save))
428        action.setShortcutContext(Qt.WidgetWithChildrenShortcut)
429        self.connect(action, SIGNAL("triggered()"), self.saveScript)
430
431        self.consoleBox = OWGUI.widgetBox(self, 'Console')
432        self.splitCanvas.addWidget(self.consoleBox)
433        self.console = PythonConsole(self.__dict__, self)
434        self.consoleBox.layout().addWidget(self.console)
435        self.console.document().setDefaultFont(QFont(defaultFont))
436        self.consoleBox.setAlignment(Qt.AlignBottom)
437        self.console.setTabStopWidth(4)
438
439        self.openScript(self.codeFile)
440        try:
441            self.libraryView.selectionModel().select(
442                self.libraryList.index(self.currentScriptIndex),
443                QItemSelectionModel.ClearAndSelect
444            )
445        except Exception:
446            pass
447
448        self.splitCanvas.setSizes([2, 1])
449        if self.splitterState is not None:
450            self.splitCanvas.restoreState(QByteArray(self.splitterState))
451
452        self.connect(self.splitCanvas, SIGNAL("splitterMoved(int, int)"),
453                     self.onSpliterMoved)
454        self.controlArea.layout().addStretch(1)
455        self.resize(800, 600)
456
457    def setExampleTable(self, et):
458        self.in_data = et
459
460    def setDistanceMatrix(self, dm):
461        self.in_distance = dm
462
463    def setNetwork(self, net):
464        self.in_network = net
465
466    def setLearner(self, learner):
467        self.in_learner = learner
468
469    def setClassifier(self, classifier):
470        self.in_classifier = classifier
471
472    def selectedScriptIndex(self):
473        rows = self.libraryView.selectionModel().selectedRows()
474        if rows:
475            return  [i.row() for i in rows][0]
476        else:
477            return None
478
479    def setSelectedScript(self, index):
480        selection = self.libraryView.selectionModel()
481        selection.select(self.libraryList.index(index),
482                         QItemSelectionModel.ClearAndSelect)
483
484    def onAddScript(self, *args):
485        self.libraryList.append(Script("New script", "", 0))
486        self.setSelectedScript(len(self.libraryList) - 1)
487
488    def onAddScriptFromFile(self, *args):
489        filename = QFileDialog.getOpenFileName(
490            self, 'Open Python Script',
491            self.codeFile,
492            'Python files (*.py)\nAll files(*.*)'
493        )
494
495        filename = unicode(filename)
496        if filename:
497            name = os.path.basename(filename)
498            self.libraryList.append(Script(name, open(filename, "rb").read(),
499                                           0, filename))
500            self.setSelectedScript(len(self.libraryList) - 1)
501
502    def onRemoveScript(self, *args):
503        index = self.selectedScriptIndex()
504        if index is not None:
505            del self.libraryList[index]
506
507            self.libraryView.selectionModel().select(
508                self.libraryList.index(max(index - 1, 0)),
509                QItemSelectionModel.ClearAndSelect
510            )
511
512    def onSaveScriptToFile(self, *args):
513        index = self.selectedScriptIndex()
514        if index is not None:
515            self.saveScript()
516
517    def onSelectedScriptChanged(self, selected, deselected):
518        index = [i.row() for i in selected.indexes()]
519        if index:
520            current = index[0]
521            if current >= len(self.libraryList):
522                self.addNewScriptAction.trigger()
523                return
524
525            self.text.setDocument(self.documentForScript(current))
526            self.currentScriptIndex = current
527
528    def documentForScript(self, script=0):
529        if type(script) != Script:
530            script = self.libraryList[script]
531
532        if script not in self._cachedDocuments:
533            doc = QTextDocument(self)
534            doc.setDocumentLayout(QPlainTextDocumentLayout(doc))
535            doc.setPlainText(script.script)
536            doc.setDefaultFont(QFont(self.defaultFont))
537            doc.highlighter = PythonSyntaxHighlighter(doc)
538            self.connect(doc, SIGNAL("modificationChanged(bool)"),
539                         self.onModificationChanged)
540            doc.setModified(False)
541            self._cachedDocuments[script] = doc
542        return self._cachedDocuments[script]
543
544    def commitChangesToLibrary(self, *args):
545        index = self.selectedScriptIndex()
546        if index is not None:
547            self.libraryList[index].script = self.text.toPlainText()
548            self.text.document().setModified(False)
549            self.libraryList.emitDataChanged(index)
550
551    def onModificationChanged(self, modified):
552        index = self.selectedScriptIndex()
553        if index is not None:
554            self.libraryList[index].flags = Script.Modified if modified else 0
555            self.libraryList.emitDataChanged(index)
556
557    def onSpliterMoved(self, pos, ind):
558        self.splitterState = str(self.splitCanvas.saveState())
559
560    def updateSelecetdScriptState(self):
561        index = self.selectedScriptIndex()
562        if index is not None:
563            script = self.libraryList[index]
564            self.libraryList[index] = Script(script.name,
565                                             self.text.toPlainText(),
566                                             0)
567
568    def openScript(self, filename=None):
569        if filename == None:
570            filename = QFileDialog.getOpenFileName(
571                self, 'Open Python Script',
572                self.codeFile,
573                'Python files (*.py)\nAll files(*.*)'
574            )
575
576            filename = unicode(filename)
577            self.codeFile = filename
578        else:
579            self.codeFile = filename
580
581        if self.codeFile == "":
582            return
583
584        self.error(0)
585        try:
586            f = open(self.codeFile, 'r')
587        except (IOError, OSError), ex:
588            self.text.setPlainText("")
589            return
590
591        self.text.setPlainText(f.read())
592        f.close()
593
594    def saveScript(self):
595        index = self.selectedScriptIndex()
596        if index is not None:
597            script = self.libraryList[index]
598            filename = script.sourceFileName or self.codeFile
599        else:
600            filename = self.codeFile
601        filename = QFileDialog.getSaveFileName(
602            self, 'Save Python Script',
603            filename,
604            'Python files (*.py)\nAll files(*.*)'
605        )
606
607        self.codeFile = unicode(filename)
608
609        if self.codeFile:
610            fn = ""
611            head, tail = os.path.splitext(self.codeFile)
612            if not tail:
613                fn = head + ".py"
614            else:
615                fn = self.codeFile
616
617            f = open(fn, 'w')
618            f.write(self.text.toPlainText())
619            f.close()
620
621    def execute(self):
622        self._script = str(self.text.toPlainText())
623        self.console.write("\nRunning script:\n")
624        self.console.push("exec(_script)")
625        self.console.new_prompt(sys.ps1)
626        for out in self.outputs:
627            signal = out[0]
628            self.send(signal, getattr(self, signal, None))
629
630
631if __name__ == "__main__":
632    appl = QApplication(sys.argv)
633    ow = OWPythonScript()
634    ow.show()
635    appl.exec_()
636    ow.saveSettings()
Note: See TracBrowser for help on using the repository browser.