You are viewing a plain text version of this content. The canonical link for it is here.
Posted to dev@arrow.apache.org by "Segovia, Carlos EXT" <Ca...@comafi.com.ar> on 2019/11/14 19:50:19 UTC

Disabling Gandiva, Plasma, or other components

Hi, I read from https://github.com/apache/arrow/issues/4216 that it's posible to disabling Gandiva, Plasma, or other components that you do not require.
I',m trying to deploy a aws lambda with pandas and pyarrow but I get the error Unzipped size must be smaller than 262144000 bytes
How can I disable this components? I delete it from the venv.../site-packages/pyarrow folder but it doesn't work.

Thanks in advance
Regards
Carlos Segovia
La informacion contenida en el presente correo y en sus adjuntos -en su caso- es confidencial y de uso exclusivo para los destinatarios del mismo. Si Ud. recibe este correo por error tenga bien notitificar al emisor y eliminarlo. Esta prohibido a las personas o entidades que no sean los destinatarios de este correo cualquier tipo de modificacion, copia, distribucion, divulgacion, retencion o uso de la informacion que contiene. Banco Comafi S.A., sus vinculadas y demas sociedades del Grupo Comafi no se responsabilizan por cualquier uso del correo electronico que fuera: abusivo, contrario a la moral, a las buenas costumbres o a la ley, o realizado fuera de las competencias laborales del autor del mail. Este no es un medio utilizado para contraer obligaciones contractuales, excepto que, previamente, asi se hubiera pactado por escrito.

Re: Disabling Gandiva, Plasma, or other components

Posted by Wes McKinney <we...@gmail.com>.
The relevant JIRA is

https://issues.apache.org/jira/browse/ARROW-6776

This is not a very complex project (changing flags and refactoring for
code reuse between the "slim" and "comprehensive" build). If there
were interested maintainers, we could even have a "pyarrow-slim" on
PyPI. But I cannot do it and I do not have the funding to commit my
team's time to maintain it, so the work will have to be done and
maintained by someone else.

On Sun, Nov 17, 2019 at 5:27 AM Micah Kornfield <em...@gmail.com> wrote:
>
> Hi Carlos,
> I'm not sure simply removing the files from the pyarrow folder would work.
> I'm don't have much knowledge in this area, but I think you would
> potentially need build your own wheel by modifying the script referenced in
> the issue [1].
>
> Thanks,
> Micah
>
> [1]
> https://github.com/apache/arrow/blob/master/python/manylinux1/build_arrow.sh
>
> On Thu, Nov 14, 2019 at 12:44 PM Segovia, Carlos EXT <
> Carlos.Segovia@comafi.com.ar> wrote:
>
> > Hi, I read from https://github.com/apache/arrow/issues/4216 that it's
> > posible to disabling Gandiva, Plasma, or other components that you do not
> > require.
> > I',m trying to deploy a aws lambda with pandas and pyarrow but I get the
> > error Unzipped size must be smaller than 262144000 bytes
> > How can I disable this components? I delete it from the
> > venv.../site-packages/pyarrow folder but it doesn't work.
> >
> > Thanks in advance
> > Regards
> > Carlos Segovia
> > La informacion contenida en el presente correo y en sus adjuntos -en su
> > caso- es confidencial y de uso exclusivo para los destinatarios del mismo.
> > Si Ud. recibe este correo por error tenga bien notitificar al emisor y
> > eliminarlo. Esta prohibido a las personas o entidades que no sean los
> > destinatarios de este correo cualquier tipo de modificacion, copia,
> > distribucion, divulgacion, retencion o uso de la informacion que contiene.
> > Banco Comafi S.A., sus vinculadas y demas sociedades del Grupo Comafi no se
> > responsabilizan por cualquier uso del correo electronico que fuera:
> > abusivo, contrario a la moral, a las buenas costumbres o a la ley, o
> > realizado fuera de las competencias laborales del autor del mail. Este no
> > es un medio utilizado para contraer obligaciones contractuales, excepto
> > que, previamente, asi se hubiera pactado por escrito.
> >

Re: Disabling Gandiva, Plasma, or other components

Posted by Micah Kornfield <em...@gmail.com>.
Hi Carlos,
I'm not sure simply removing the files from the pyarrow folder would work.
I'm don't have much knowledge in this area, but I think you would
potentially need build your own wheel by modifying the script referenced in
the issue [1].

Thanks,
Micah

[1]
https://github.com/apache/arrow/blob/master/python/manylinux1/build_arrow.sh

On Thu, Nov 14, 2019 at 12:44 PM Segovia, Carlos EXT <
Carlos.Segovia@comafi.com.ar> wrote:

> Hi, I read from https://github.com/apache/arrow/issues/4216 that it's
> posible to disabling Gandiva, Plasma, or other components that you do not
> require.
> I',m trying to deploy a aws lambda with pandas and pyarrow but I get the
> error Unzipped size must be smaller than 262144000 bytes
> How can I disable this components? I delete it from the
> venv.../site-packages/pyarrow folder but it doesn't work.
>
> Thanks in advance
> Regards
> Carlos Segovia
> La informacion contenida en el presente correo y en sus adjuntos -en su
> caso- es confidencial y de uso exclusivo para los destinatarios del mismo.
> Si Ud. recibe este correo por error tenga bien notitificar al emisor y
> eliminarlo. Esta prohibido a las personas o entidades que no sean los
> destinatarios de este correo cualquier tipo de modificacion, copia,
> distribucion, divulgacion, retencion o uso de la informacion que contiene.
> Banco Comafi S.A., sus vinculadas y demas sociedades del Grupo Comafi no se
> responsabilizan por cualquier uso del correo electronico que fuera:
> abusivo, contrario a la moral, a las buenas costumbres o a la ley, o
> realizado fuera de las competencias laborales del autor del mail. Este no
> es un medio utilizado para contraer obligaciones contractuales, excepto
> que, previamente, asi se hubiera pactado por escrito.
>