[ILUGC] Re: Commercial : <SOS> JDBC - JAVA architect and Developers

  • From: Anbu Ganesh <anbu.ganesh@xxxxxxxxxxxxxxxxx>
  • To: ilugc@xxxxxxxxxxxxx
  • Date: Fri, 7 Apr 2017 11:03:26 +0530

Yes, Agreed - I will involve my DB team to answer this. 
We tried pushing MSSQL and Mysql to the max and decided to go with Spark in 
2014. 
We are happy with Spark but not satisfied with as Mysql . We feel the 
bottleneck is at JDBC connector, hence the query. 


On Apr 7, 2017, at 10:57 AM, Ashwanth Kumar (Redacted sender "ashwanthkumar" 
for DMARC) <dmarc-noreply@xxxxxxxxxxxxx> wrote:

Anbu, in the spirit of the open source community, it would be best if you
can share the details to the list so others in the group can chip in if
needed and while others can also learn in the process.

On Fri, Apr 7, 2017 at 10:54 AM, Anbu Ganesh <anbu.ganesh@xxxxxxxxxxxxxxxxx>
wrote:

Thanks Ashwanth:

Can I have your email ID will explain in detail.


On Apr 7, 2017, at 10:41 AM, Ashwanth Kumar (Redacted sender
"ashwanthkumar" for DMARC) <dmarc-noreply@xxxxxxxxxxxxx> wrote:

Anbu,
JDBC is primarily meant for SQL databases (without getting too much
technical). BigData/NoSQL systems like Hive or HBase, that provide a JDBC
connectivity does so to ease integrations. Having said that, since
systems
are not like traditional DBMS, and your query (SQL) access would then
have
to be converted into their access model (gets / puts / scans if it's
HBase)
and then get executed.

So you wouldn't be able to get response times like in MySQL or Postgres
for
example.

If you could explain your architecture more we can probably help you
with a
better architecture. Answers to some questions like these, would be super
useful

 1. What BigData / NoSQL system are you using?

1) Hadoop / Hive/ Spark
 2. The system that's trying to access this TBs of data - is it an
online
 application? By that I mean, will it run queries for an interaction
from a
 user or used for a batch process ?
2) NO
 3. If it's an online application, do you really need TBs of data to be
 exposed?
3) Will explain this in detail.
 4. If it's an online application, why not try actual DBMS like MySQL /
 Postgres?
4) For vast amount of data Mysql couldnt cope

 5. Is this system used for OLAP kind operations?

5)Not really. Will explain

HTH


On Fri, Apr 7, 2017 at 10:27 AM, Anbu Ganesh <
anbu.ganesh@xxxxxxxxxxxxxxxxx>
wrote:

Dear Fellow Members,

      We have a large data set analytics platform and we have been
looking for an excellent Java developer/ Architect
who could resolve the limitation of JDBC (I doubt if it is a limitation
of
JDBC or the way we look at it).

      Here is the short summary, if you are interested we could discuss
in detail.

Bigdata / Large data systems (Hadoop/NOSQL) supports JDBC and not
Ibatis/Mybatis connections.
We see bottle neck on this area when platform is communicating with
Backend. Data is in terabytes.
What is the recommended architecture.


Seeking support from Java experts and developers who has worked on
working
on the connectivity, apart
from that we are also looking for good Java developers.

Any help/support appreciated.

Thanks,
anbu.
On Apr 7, 2017, at 10:19 AM, Sahasranaman M S <sahasr@xxxxxxxx> wrote:

On 6 April 2017 at 20:50, mani maran <manimaran436@xxxxxxxxx> wrote:
Dear all,
When I use Mozilla Firefox (in Ubuntu 16.0), it is randomly crashing
at
inopportune moments, crashing my other open applications open at the
time,
be it kile or Libreoffice writter.


This started happening to me immediately after I upgraded to Fedora 25.
Half the time it would kill all the apps,  half the time it would log
me
out.  I assumed it was a Wayland - Firefox compatibility issue,  never
figured it out.


_____________________________________
ILUGC List: //www.freelists.org/list/ilugc
ILUGC Web: http://ilugc.in/


_____________________________________
ILUGC List: //www.freelists.org/list/ilugc
ILUGC Web: http://ilugc.in/




--

Ashwanth Kumar / ashwanthkumar.in


_____________________________________
ILUGC List: //www.freelists.org/list/ilugc
ILUGC Web: http://ilugc.in/


_____________________________________
ILUGC List: //www.freelists.org/list/ilugc
ILUGC Web: http://ilugc.in/




-- 

Ashwanth Kumar / ashwanthkumar.in


_____________________________________
ILUGC List: //www.freelists.org/list/ilugc
ILUGC Web: http://ilugc.in/


_____________________________________
ILUGC List: //www.freelists.org/list/ilugc
ILUGC Web: http://ilugc.in/

Other related posts: