エンジニア転職 プログラミング

【Javaポートフォリオ】なぜスクレイピングツールがおすすめか?

投稿日:

なぜスクレイピングツールか?

・スキルに需要がある
・総合的なスキルが身に付く
・個人開発に応用できる

スキルに需要がある

執筆時点(2021年3月28日)時点で、ランサーズに1643件の発注があります。
今後これは増えてくる傾向にあると予想できます。
理由は企業が競合の情報収集をスクレイピングで行っているということです。

また、ビッグデータによるデータ分析も今後は伸びて行く分野と見ていますが、その元データは何処から取得すると思いますか?

自社の購買データだけで無く、他社の価格戦略やプロモーション戦略を分析して、自社の戦略に反映していくのは容易に予測できることです。
そのためにスクレイピングでデータ収集するのは当たり前になってきます。
そういった視点から、需要のあるスキルと言えます。

あとは自分が興味を持てるかがポートフォリオ作成のモチベーションになってきます。
ポートフォリオは、「自分が興味を持ち、技術的にもビジネス的にも需要があるもの」を選ぶことが大事です。

総合的なスキルが身に付く

DBスキル

スクレイピングはデータを取得してくるだけでなく、データの受け皿となるデータベースへの格納も必要になります。

定形データであればRDBMSでいいですし、不定形データであればNoSQLを採用したりと、どのみちデータベースを使用します。
そのため、データベースの設計についてのスキルが必要になってきます。

コーディングスキル

次にそのデータを活用するためのWebアプリケーションを開発することで、コーディングスキルが身に付きます。

インフラ構築

ポートフォリオとして公開する前提でいうと、クラウド環境を使うことをおすすめします。
これは構築の容易性とスキルのキャッチアップのためです。
そもそも今ではAWS、GCP、Azureといったクラウド環境で運用するのが当たり前になってきているので、クラウド以外にデプロイする選択肢はないとは思います。

ネットワークスキル

また、クラウド環境内ではネットワークの設定も必要なるので、それらの知識も身に付きます。
DMZを意識した構成にすることで、セキュリティへの考慮も身に付きます。

ポートフォリオを作ってクラウドに公開するだけで、これだけの総合力が身につことになります。

個人開発に応用できる

正直ここまで自走できるのであれば、個人開発としてサービスを運用することも十分可能です。

収益を上げられるかどうかはマーケティングや需給バランスなどのビジネス要素が関わってくるので別問題とはなりますが、ビジネス視点を養うという点で他のエンジニアとの差別可になりえます。

私は自分と妻が使用するものを作っているだけですが、「どういう機能があったら使いやすいか?」を考えることで、ユーザ視点に立つ練習になっています。

小人数で使用するものであったとしても、自ら進んで使い易さを追及したり提案したりすることで、言われた通りにコーディングするだけのプログラマより,遥かにアドバンデージがあります。

そういったことも含めて、個人開発に取り組むとよりユーザ視点に立った開発・提案ができるようになります。
これは、面談において大きなPRポイントにもなることに加えて、実業務においてもユーザからの好評価に繋がります。

まとめ

  • ポートフォリオは自分の興味と技術的な需要とビジネス的な需要を考慮すること。
    それが、意欲と価値増大になる。
  • ポートフォリオをクラウドで公開することは、総合的なスキルアップになる。
  • クラウドの公開までを自走できれば、個人開発もできるレベルになっている。
    個人開発はビジネス視点、ユーザ視点を持つきっかけにもなり、他のプログラマとの差別化につながる。

 
最後までお読み頂き、ありがとうございました!
ご意見・ご要望がありましたら、遠慮なくコメント下さい!
もし内容が良かったらランキング評価を頂けると励みになります(^^)

ランキング評価する

-エンジニア転職, プログラミング
-

執筆者:


comment

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です

CAPTCHA


関連記事

【SpringBoot入門】#12~ 削除機能の実装

概要 ダイアログでOK押下された場合の削除処理を実行します。 画面からリクエストされた書籍情報IDをキーに、論理削除を実装します。 システム開発ではほとんどの場合、論理削除を行います。 物理削除するの …

使って便利だったNode.jsのnpmモジュール

Excel操作 xlsx Excelファイルからシート単位でデータを読み取り、JSON化することができるモジュール。 VBAでは処理が遅い場合の代替手段となるが、書式設定はできない。 JSONファイル …

【Java】画像ファイルをバイナリで比較する方法

  画像ファイルの比較 比較元ファイル 素材はPhotoACから拝借しました。 コピー元画像:PCを持つ女性 コピーしたファイルとの比較(True) コピー元ファイルをコピーしただけのファイ …

【Bootstrap】入力フォームを作成しよう!

概要 SpringBootチュートリアルで作成した各画面の入力フォームをBootstrapに置き換えます。 また、containerを使用することで容易にグリッドシステムを導入できます。 実装 検索画 …

【Spring】バリデーション時に、入力値を保持する方法

登録画面で「登録」ボタンを押した後、 バリデーションで引っ掛かってエラーになっても 入力内容を画面に保持して置く方法についてです。 テンプレートエンジンは、Tymeleafを使用しています。 方法とし …

記事を探す

SpringFramworkの良書

■おすすめ教材
Javaの基本を学んだ人が、次のステップとして読む本(中級者向け)

※SpringはJavaのFrameworkの1つです。
変更のしやすさ、保守性の高さが特徴です。