黄宾虹，原名懋质，后改名质，字朴存，寓居沪上后又改字宾虹。1865年1月27日（清同治四年正月初一）黄宾虹生于浙江金华，出生时正是个"一夜连双岁，五更分二年"的时刻，所以黄宾虹在他《八十感言》中有："吾生乙丑年，蓂算犹甲子。受天知春迟，坠地得岁始。"的诗句。
黄宾虹的少年时期，正是父亲的生意如日中天的时候，家境较为宽松。父亲设家塾请名儒教授黄宾虹兄弟。从《字汇》、《说文》到四书五经，黄宾虹接受了完整的儒家教育，并打下了扎实的古文和诗词基础。
与此同时，黄宾虹在绘画篆刻等方面表现出超群的悟性和天分。6岁临摹的古人山水册曾得到老师的赞扬，11岁摹刻的邓石如篆印使父亲惊讶不已。他对绘画的持久兴趣更是惊人，凡是家藏的和能借到的古书画，他都临摹至再，直到烂熟于心为止。他还临摹到董玄宰、查二瞻、王蒙、沈石田等古人的真迹，大大提高了眼力和功力。
给予少年黄宾虹重要影响的人有两个，一个是黄崇惺，一个是倪易甫。
黄崇惺虽然是黄宾虹的族侄，年龄却比他大得多。黄宾虹八岁那年，黄崇惺来金华见到黄宾虹，对黄宾虹的对答如流大加赞赏。此后，黄崇惺寄给黄宾虹《劝学赘》、《凤山笔记》、《重刊潭滨杂志》等书，还为黄家私塾引荐歙县经师程健行给黄宾虹兄弟讲授四书五经。
倪易甫是黄宾虹父亲的好友，善书画，精于画理。他常到黄家观赏黄宾虹父亲收藏的古书画，每当这时，黄宾虹总是侍立一旁，仔细听他论画。直到宾虹晚年还时常忆起倪翁所讲的"作画当如作字法，应笔笔分明，方不致为画匠"的教诲，这几乎贯串了黄宾虹一生的临摹和创作主张。在倪翁的指导下，黄宾虹很快掌握了临摹与速写的基本功，并画了大量的时事画、插图、山水画。