前回の続き yk-st.hatenablog.com 今回はラダーシリーズを卒業してからのお話。 ラダーシリーズを卒業するといよいよ、英文の大海に挑むことになる。「よっしゃ、じゃあいきなりハリーポッターやな」と言わずにのんびり行こうというお話。 まずおすすめなの…

普通に家で書いて、普通に実務で使ってるもの。 EC2のインスタンスに対して、空いているprivate IP をセカンダリIPとして設定したかったので、空いているIPを動的に取得してその値を用いる必要があった。 コードは以下。 list all private in CIDR 今回は、…

取り込みの業務ででEmbulkを使っていると（個人的にsqoopよりembulk派）思わぬところでつまづく時がある。 mysql pulginとparquet用のプラグインを組み合わせて利用している(orcも)。 MysqlのtmpSpaceがたりない。 洗い替えのパターンなどで、大量のデータを…

プライベートサブネットで運用するとは？ 面倒くささと引き換えにセキュリティとして安全であるということ。 要件が許すのであれば、全部パブリックが嬉しいいがそうもいかない。仮に要件がそうなっていなかったとしてもデータの安全性を考慮するのであれば…

語彙力は戦闘力 これに尽きる。リーディングをする際に必要なものは 背景知識（全く意味不明なものは、日本語でも読めない） 語彙力 イメージ力（日本語に訳さないために必要） この３点があるだけで、読める本や文献は相当増えてくると思う。 背景知識 日本…

コロナの影響で急遽リモートワークへ切り替え 私の会社でも、コロナの影響でリモートワークに切り替えることになり、はや３ヶ月が経ちました。 リモートのために借りたと言っても過言ではない部屋で、いつしか来るその日のためにノロノロと準備をしていまし…

既存との戦い 一から作るサービルならまだしも、 歴史のあるサービスを移行するときなどは、元々の状況を活かしつつ、新しい価値を生み出していくことが求められる。 とかっこいいことを言ってみたものの、 今回は既存のS3バケットの設定を持ってきて、その…

エンジニアって英語がつきものですよね エンジニアにたるものオライリーの本読みなさいとか、テレカンしてくださいとか、なんだかんだで英語の4技能が要求をされることがあったりする Reading(O'Reillyを読む、ログを読む) Writing(READMEを記載する、質問す…

現在データエンジニアとして、社内で働いています。 が、、、あまり知名度？が高くないらしく入社される新卒の方もデータエンジニア ？とあまりしっくりしない様子。 そんなモヤモヤをいくつかの投稿を通して、解決できればいいなぁと思っております。 あま…