<div dir="ltr"><div style>Hi all,</div><div class="gmail_extra">I think it&#39;s great that Bob Murphy&#39;s group has implemented pyslic and pyslid in an open-source framework like OMERO. It looks like a substantial body of work. I&#39;m wondering what needs to be done to make it a general-purpose framework however, especially looking at it from the perspective of our group&#39;s experience with CellProfiler. Also, Simon, thanks for moving this forward.</div>
<div class="gmail_extra"><br></div><div class="gmail_extra">My reading of the pyslic code is that it supports a nuclear stain and a protein stain and calculates a standard set of per-image and per-object features (although I haven&#39;t quite figured out the storage mechanism for the object features). This is adequate for a large class of experiments involving two-color fluorescently-labeled samples and it&#39;s likely the methods are robust, but our experience has been that experimental protocols can be more varied (multiple protein stains, brightfield images) and the biological questions can require additional image preprocessing to highlight the structures of interest, often requiring tuning parameters specific to the structure scale. Because of this, I think that the framework needs a modular architecture that supports development of new algorithms by computational researchers and configuration by the end users and it needs to extend beyond a curated code-base to allow for innovation. Personally, I&#39;m really pleased that the framework is in Python because it aligns well with our group, but perhaps this is limiting for the ImageJ community and perhaps some portion of CellProfiler&#39;s bridge between Python and ImageJ could be adapted to supply the connection.</div>
<div class="gmail_extra"><br></div><div class="gmail_extra" style>I think that we do need a platform for innovation and the keys to that are interoperability, standards, and a model of the analysis that is flexible enough to describe our community&#39;s experiments and that captures the analysis protocol in a reproducible manner. I&#39;m going to outline my perspective on the model here, drawing on our group&#39;s experience with CellProfiler, and try to keep it brief. I see the components of the model being:</div>
<div class="gmail_extra" style><br></div><div class="gmail_extra" style>* Fields of view - N dimensional spaces (X, Y, T, Z, spectral) representing an imaging site</div><div class="gmail_extra" style>* Images - acquired image data on a field of view (with acquisition metadata) or similar produced by algorithms such as filters or morphological operations.</div>
<div class="gmail_extra" style>* Segmentations - defining multiple regions of interest on the fields of view or on (hyper)planes of the fields of view</div><div class="gmail_extra" style>* Relationships between segmented regions - links between segmented regions either within segmentations or across them. Examples might be time-lapse cell tracking, associations between nuclear and cellular segmentations or groupings of organelle segmentations within a cell.</div>
<div class="gmail_extra" style>* Measurements - data computed on the images, segmentations and relationships within a field of view. My take on this is that a measurement produces a numeric feature value per image or per segmentation region, but perhaps that&#39;s too narrow.</div>
<div class="gmail_extra" style>* Protocol - a description of how to perform the analysis. I think the key elements are a link to the OMERO screen and a list of the parameterized algorithms to be performed. The screen provides image inputs to the algorithms which are the available image acquisition channels and the algorithms themselves provide images, segmentations, relationships and measurements which can serve as inputs to other algorithms in the protocol. Algorithms will often be parameterizable by the user and these parameters should be captured by the protocol. Ideally, the protocol should capture the versions of the algorithms using a mechanism such as a GIT hash. In CellProfiler, we have algorithms that produce an aggregated image based on samples from many fields of view, for instance an estimate of differences in signal magnitude across the field of view caused by non-uniform illumination - algorithms might have stacks of images as inputs and these stacks might span individual fields of view.</div>
<div class="gmail_extra" style><br></div><div class="gmail_extra" style>As far as the actual mechanics, I see OMERO or similar using the protocol as a dependency graph, fetching the algorithms using some community-standard mechanism (maven? pip?), providing inputs as specified by the protocol and harvesting the outputs for the database and for dependent algorithms. I have some detailed concerns about algorithm input/output introspection and discovery, but ImageJ 2.0&#39;s plugin introspection protocol (@parameter) is a good starting point (thanks ImageJ 2.0).</div>
<div class="gmail_extra" style><br></div><div class="gmail_extra" style>OK - somewhat CellProfiler-centric perhaps, but the nice thing about OMERO is that it is a relational database and the protocol is the thing itself - not a description of the experiment, but a mineable map of how each number is produced especially if the protocol pieces are described relationally in the database. I think the above is an ambitious undertaking, but look at the result! Researchers can trade protocols which produce robust and comparable values (not just &quot;nuclear area&quot;, but the nuclear area after illumination correction and segmentation using Otsu thresholding and a seeded watershed of HeLa cells stained with DAPI). Developers can publish their method in OMERO and possibly OMERO itself can generate citations based on a protocol, leading to better accreditation of our work. And OMERO itself becomes a sustainable platform for analysis with a well-defined interoperable API for image processing.</div>
<div class="gmail_extra"><br></div><div class="gmail_extra" style>Hope this all gives things a positive lift, thx for reading this far,</div><div class="gmail_extra" style>--Lee</div><div class="gmail_extra"><br><div class="gmail_quote">
On Fri, Jul 5, 2013 at 10:03 AM, Simon Li <span dir="ltr">&lt;<a href="mailto:s.p.li@dundee.ac.uk" target="_blank">s.p.li@dundee.ac.uk</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex">
Hi everyone<br>
<br>
It was great to see so many people interested in OMERO.searcher and WND-CHRM at the Paris meeting, both those who were interested in installing it on their own systems and also those of you who were interested in developing other analysis algorithms for use with OMERO.<br>

<br>
One of the main points that came up was that OMERO should provide a single API for storing and calculating image features. Robert Murphy&#39;s group at CMU have already developed PySLID [<a href="http://github.com/icaoberg/pyslid" target="_blank">http://github.com/icaoberg/pyslid</a>], a python module for calculating and storing features used with OMERO.searcher, so I&#39;d like to propose we bring this into the openmicroscopy GitHub organisation, and rename it to OMERO.features (other suggestions are welcome).<br>
</blockquote><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex">
Then there&#39;s the much bigger task of modifying the module to cater for everyone&#39;s requirements. I can see several potential issues, including how we handle multiple channels, z-slices, timepoints, ROIs, etc since features can be calculated for these individually or as a whole.<br>

<br>
If anyone has any thoughts or comments on what they&#39;d like to see it&#39;d be great if you could share them with the rest of this list, or if you prefer on our forums.<br>
<br>
Best wishes<br>
<br>
Simon<br>
<br>
<br>
<br>
The University of Dundee is a registered Scottish Charity, No: SC015096<br>
<br>
_______________________________________________<br>
ome-devel mailing list<br>
<a href="mailto:ome-devel@lists.openmicroscopy.org.uk">ome-devel@lists.openmicroscopy.org.uk</a><br>
<a href="http://lists.openmicroscopy.org.uk/mailman/listinfo/ome-devel" target="_blank">http://lists.openmicroscopy.org.uk/mailman/listinfo/ome-devel</a><br>
</blockquote></div><br></div></div>